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MULȚUMIRI ENTS

Când am început să lucrez la această carte, mi-a venit o idee despre o poveste științifico-fantastică. S-ar putea să nu-l scriu niciodată, așa că consider că este în regulă să renunț la complot. O femeie, Ellen, este trezită de un telefon cali. Este un soț. E ceva strânge în vocea lui; sună îngrijorat și cumva detonat. În viitorul apropiat în care se desfășoară această poveste, inteligența artificială (AI) a devenit atât de eficientă încât un asistent virtual poate face calis în numele tău reproducându-ți propria voce, iar simularea va fi atât de precisă încât să-ți păcălească chiar și familia apropiată . Si prieteni. Ellen și soțul ei, totuși, au fost de acord că nu vor folosi niciodată AI pentru a comunica între ei. Cu toate acestea, în vocea soțului în acea dimineață există ceva care nu seamănă cu el. Mai târziu, Ellen descoperă că soțul ei a murit chiar în noaptea aceea, cu câteva ore înainte de ora caliului lor. Cali ar fi trebuit să fie făcut de un asistent AI. Consternat de pierderea ei, ea ascultă conversația din nou și din nou, până când în sfârșit prinde câteva indicii pentru a rezolva misterul. De fapt, această poveste științifico-fantastică pe care nu am scris-o este și o poveste cu crimă. Pentru a afla adevărul despre moartea soțului ei, Ellen va trebui să interpreteze conținutul conversației. În acest proces, ea va trebui, de asemenea, să stabilească dacă cuvintele provin de la soțul ei, de la mașina care l-a imitat sau dintr-o combinație a celor două.

Această carte nu este science fiction, dar, la fel ca multă science fiction, este și o încercare de a înțelege tehnologiile ale căror implicații și semnificații abia începem să le înțelegem. Folosesc istoria AI – una surprinzător de lungă pentru tehnologiile care sunt adesea prezentate ca noutăți absolute – ca o busolă pentru a-mi orienta explorarea. Am început să lucrez la această carte în 2016. Ideea mea inițială a fost să scriu o istorie culturală a testului Turing, dar explorările mele au adus descoperiri interesante și neașteptate care au făcut ca proiectul final să se extindă mult dincolo de asta.

Un număr de persoane au citit și au comentat primele versiuni ale acestei lucrări. Editorul meu, Sarah Humphreville, nu numai că a crezut în acest proiect

încă de la început, dar a oferit și sfaturi cruciale și sugestii punctuale pe parcursul dezvoltării sale. Redactorul asistent Emma Hodgon a fost, de asemenea, extrem de utilă și scrupuloasă. Leah Henrickson a oferit feedback cu privire la toate capitolele; inteligența și cunoștințele ei au făcut din aceasta o carte mult mai bună. Sunt recunoscător tuturor celor care au dedicat timp și atenție citirii și comentarii diferitelor părți ale acestei lucrări: Saul Albert, Gabriele Balbi, Andrea Ballatore, Paolo Bory, Riccardo Fassone, Andrea Guzman, Vincenzo Idone Cassone, Nicoletta Leonardi, Jonathan Lessard, Peppino Ortoleva, Benjamin Peters, Michael Pettit, Thais Sardá, Rein Sikveland și Cristian Vaccari.

Colegii mei de la Universitatea Loughborough au fost o sursă constantă de sprijin, atât profesional, cât și personal, în timpul gestației cărții. Aș dori să îi mulțumesc în special lui John Downey pentru că a fost un mentor atât de generos într-un moment important și potențial complicat al carierei mele și pentru că m-a învățat importanța modestiei și a integrității în acest proces. Mulți alți membri seniori ai personalului de la Loughborough au fost foarte susținători în multe ocazii de-a lungul ultimilor ani și doresc să le mulțumesc în mod deosebit lui Emily Keightley, Sabina Mihelj și James Stanyer pentru ajutorul și amabilitatea lor constantă. Mulțumesc, de asemenea, colegilor și prietenilor mei Pawas Bisht, Andrew Chadwick, David Deacon, Antonios Kyparissiadis, Line Nyhagen, Alena Pfoser, Marco Pino, Jessica Robles, Paula Saukko, Michael Skey, Elzabeth Stokoe, Vaclav Stetka, Thomas Thurnell-Read, Peter Yeandle , și Dominic Wring, precum și tuturor celorlalți colegi de la Loughborough, pentru că au făcut munca mai ușoară și mai plăcută.

În ultimele etape ale acestui proiect, am primit o bursă de vizită la ZeMKI, Centrul pentru Cercetare Media, Comunicare și Informare al Universității din Bremen. A fost o oportunitate grozavă de a discuta despre munca mea și de a avea spațiu și timp pentru a reflecta și a scrie. Conversațiile cu Andreas Hepp și Yannis Theocharis au fost deosebit de utile pentru a clarifica și a aprofunda unele dintre ideile mele. Mulțumesc tuturor membrilor ZeMKI pentru feedback și prietenie, în special, dar nu numai, Stefanie Averbeck-Lietz, Hendrik Kühn, Kerstin Radde-Antweiler și Stéphanie Seul, precum și celorlalți membri ZeMKI a căror reședință a coincis cu șederea mea: Peter Lunt, Ghislain Thibault și Samuel Van Ransbeeck.

Unele părți ale acestei cărți au fost revizuite din publicațiile anterioare. În special, părți ale capitolului 3 au fost publicate anterior, într-o versiune semnificativ diferită, în revista New Media and Society, iar o versiune anterioară a capitolului 6 a fost prezentată ca document de lucru în Comunicarea
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Serie Documente de lucru Figurations. Le mulțumesc recenzenților și editorilor pentru feedback-ul lor generos.

Mulțumirile mele, în cele din urmă, sunt adresate numeroșilor oameni care au fost însoțitorii mei de-a lungul acestor ani, făcând-o atât de bine încât nicio mașină nu îi va putea înlocui vreodată. Această carte este dedicată în special celor trei dintre ei: fratele și sora mea și partenerul meu, Viola.

Mulțumiri [ ix ]

Îmi amintesc de o vizită pe care am făcut-o la una dintre reședința reginei Victoria, Osborne, pe insula Wight. . .. Proeminentă printre lucrările expuse a fost o sculptură în marmură în mărime naturală a unui câine mare cu blană, un portret al iubitului animal de companie al Reginei „Noble”. Portretul trebuie să fi fost la fel de fidel ca și câinele, fără îndoială, dar din lipsă de culoare ar fi putut fi umplut. Nu știu ce m-a determinat să-l întreb pe ghidul nostru: „Pot să-l mângâiesc?” Ea a răspuns: „Amuzant că vrei să faci asta; toți vizitatorii care trec îl mângâie – trebuie să-l spălăm în fiecare săptămână.” Acum, nu cred că vizitatorii din Osborne, inclusiv eu, sunt deosebit de predispuși la credințe magice. Nu credeam că imaginea este reală. Dar dacă nu ne-am fi gândit undeva, cu greu am fi reacționat așa cum am făcut – acel gest de mângâiere ar fi putut foarte bine să fi fost compus din ironie, jucăuș și o dorință secretă de a ne asigura că, până la urmă, câinele era doar din marmură.

— Ernst Gombrich, Artă și iluzie

Introducere

În mai 2018, Google a făcut o demonstrație publică a proiectului său în curs de desfășurare Duplex, o extensie a Google Assistant programată pentru a desfășura conversații telefonice. CEO-ul Google, Sundar Pichai, a prezentat înregistrarea unei conversații în care programul a imitat o voce umană pentru a rezerva o întâlnire la un salon de coafură. Vocea sintetică a lui Duplex a prezentat pauze și ezitare într-un efort de a suna mai credibil. Strategia părea să funcționeze: reprezentanta salonului a crezut că vorbește cu o persoană reală și a acceptat rezervarea.1

În săptămânile următoare, realizările aparente ale Duplex au atras laude, dar și critici. Comentariile de după demonstrație au evidențiat două probleme legate de demonstrație. Pe de o parte, unii au susținut că Duplex a funcționat „decepție directă, deliberată”2, deschizând noi întrebări etice cu privire la capacitatea unei inteligențe artificiale (AI) de a păcăli utilizatorii să creadă că este umană. Pe de altă parte, unii și-au exprimat îndoielile cu privire la autenticitatea demo-ului. Ei au indicat o serie de ciudățenii în conversațiile înregistrate: companiile, de exemplu, nu s-au identificat niciodată, nu se auzea niciun zgomot de fond, iar cei care iau rezervări nu i-au cerut niciodată lui Duplex un număr de contact. Acest lucru a sugerat că Google ar fi manipulat demonstrația, pretinzând capacitatea lui Duplex de a trece drept om.3
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Controversa din jurul Duplex reflectă o dinamică bine stabilită în dezbaterea publică despre AI. De la înființarea sa în anii 1950, realizările IA au fost adesea discutate în termeni binari: fie i se atribuie puteri excepționale, fie este respinsă ca o amăgire și o fraudă.4 Din când în când, prăpastia dintre aceste evaluări contradictorii a avut loc. a pus în pericol capacitatea noastră de a recunoaște că adevăratul impact al inteligenței artificiale este mai nuanțat și mai oblic decât se recunoaște de obicei. Același risc este prezent și astăzi, deoarece comentatorii par să creadă că întrebarea ar trebui să fie dacă Duplex poate sau nu să treacă drept om. Cu toate acestea, chiar dacă gadgetul Google s-a dovedit incapabil să treacă drept om, nu ar trebui să credem că iluzia va fi risipită. Chiar și în absența unei denaturări deliberate, tehnologiile AI implică forme de înșelăciune care sunt poate mai puțin evidente și directe, dar au un impact profund asupra societăților. Ar trebui să privim decepția nu doar ca o posibilă modalitate de a folosi AI, ci și ca un element constitutiv al acestor tehnologii. Decepția este la fel de esențială pentru funcționarea AI ca și circuitele, software-ul și datele care o fac să ruleze.

Această carte susține că, încă de la începutul erei computerelor, cercetătorii și dezvoltatorii au explorat modalitățile prin care utilizatorii sunt făcuți să creadă că computerele sunt inteligente. Examinând traiectoria istorică a AI de la origini până în prezent, arăt că oamenii de știință AI au încorporat cunoștințele despre utilizatori în eforturile lor de a construi interacțiuni semnificative și eficiente între oameni și mașini. Prin urmare, cer o recalibrare a relației dintre deception și AI, care pune la îndoială critic modul în care tehnologiile de calcul se bazează pe aspecte specifice ale percepției și psihologiei utilizatorilor pentru a crea iluzia AI.

Unul dintre textele de bază pentru cercetarea AI, Computing Machinery and Intelligence (1950) al lui Alan Turing, a stabilit decepția ca un rezultat probabil al interacțiunilor dintre oameni și computerele inteligente. În propunerea sa pentru ceea ce este acum cunoscut sub numele de testul Turing, el a sugerat evaluarea computerelor pe baza capacităților lor de a înșela judecătorii umani făcându-le să creadă că sunt oameni. Deși păcălirea oamenilor nu a fost niciodată obiectivul principal al AI, informaticienii au adoptat intuiția lui Turing că, ori de câte ori este implicată comunicarea cu oamenii, comportamentul utilizatorilor umani informează semnificația și impactul AI la fel de mult ca și comportamentul mașinii în sine. Pe măsură ce au fost introduse noi Sisteme interactive care îmbunătățesc comunicațiile dintre oameni și computere, oamenii de știință AI au început să se implice mai serios cu întrebări despre modul în care oamenii reacționează la mașinile aparent inteligente. Felul în care aceasta
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dinamica este acum încorporată în dezvoltarea asistenților vocali AI contemporani, cum ar fi Google Assistant, Alexa de la Amazon și Siri de la Apple, semnifică apariția unui nou tip de interfață, care mobilizează decepția pentru a gestiona interacțiunile dintre utilizatori, sistemele de calcul și Internet. servicii bazate pe

De la propunerea lui Turing, AI s-a unit într-un domeniu disciplinar în știința cognitivă și informatica, producând o gamă impresionantă de tehnologii care sunt acum în uz public, de la traducerea automată la procesarea limbajului natural și de la viziunea computerizată. la interpretarea imaginilor medicale. Cercetătorii din acest domeniu au alimentat visul – prețuit de unii oameni de știință în timp ce alții au fost respins ca nerealist – de a ajunge la IA „puternică”, adică o formă de inteligență a mașinilor care ar fi practic imposibil de distins de inteligența umană. Cu toate acestea, în timp ce dezbaterile s-au concentrat în mare măsură pe posibilitatea ca urmărirea unei IA puternice să conducă la forme de conștiință similare sau alternative cu cea a oamenilor, acolo unde am aterizat ar putea fi descris mai exact ca crearea unei game de tehnologii care oferă o iluzia inteligenței – cu alte cuvinte, crearea nu a ființelor inteligente, ci a tehnologiilor pe care oamenii le percep drept inteligente.

Reflectând modele evolutive mai largi ale narațiunilor despre schimbarea tehnologică, istoria IA și a calculatoarelor a fost până acum discutată în principal în ceea ce privește capacitatea tehnologică.5 Chiar și astăzi, proliferarea noilor sisteme AI comunicative este explicată în mare parte ca o inovație tehnică declanșată de ascensiunea rețelelor neuronale și a învățării profunde.6 În timp ce abordările apariției IA pun de obicei accentul pe evoluția tehnologiilor de programare și de calcul, acest studiu se concentrează asupra modului în care dezvoltarea IA s-a construit și pe cunoștințele despre utilizatori.7 Preluând acest punct de vedere ajută cineva să realizeze în ce măsură tendințele de a proiecta agenția și umanitatea asupra lucrurilor fac ca AI să perturbe relațiile sociale și viața de zi cu zi în societățile contemporane. Această carte, prin urmare, reformulează dezbaterea despre IA pe baza unei noi presupuneri: ceea ce mașinile schimbă în primul rând noi, oamenii. Mașinile „inteligente” ar putea într-o zi să revoluționeze viața; ele transformă deja modul în care înțelegem și desfășurăm interacțiuni sociale.

De la apariția inteligenței artificiale ca un nou domeniu de cercetare, mulți dintre cercetătorii săi de frunte au declarat că cred că oamenii sunt fundamental similari cu mașinile și, în consecință, că este posibil să se creeze un computer care să egaleze sau să depășească inteligența umană în toate aspectele și domeniile. Inca
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distracția unui principiu similar nu contrastează cu forță și este adesea complementară cu ideea că sistemele AI existente oferă doar iluzia inteligenței umane. De-a lungul istoriei AI, mulți au cunoscut limitele sistemelor actuale și și-au concentrat eforturile pe proiectarea de programe care să ofere cel puțin aspectul inteligenței; în opinia lor, inteligența artificială „reai” sau „puternică” ar avea progrese suplimentare, propriile lor sisteme de simulare reprezentând doar un pas în această direcție.8 Înțelegerea modului în care oamenii se angajează în schimburile sociale și cum pot fi determinati să trateze lucrurile ca agenții sociali, au devenit instrumentali pentru depășirea limitărilor tehnologiilor AI. Cercetătorii din IA au stabilit astfel o direcție de cercetare care s-a bazat pe proiectarea de tehnologii care au exploatat inteligent percepția și așteptările umane pentru a oferi utilizatorilor impresia că folosesc sau interacționează cu sisteme inteligente. Această carte demonstrează că analizarea dezvoltării de-a lungul timpului a acestei tradiții – care nu a fost încă studiată ca atare – este esențială pentru înțelegerea sistemelor AI contemporane programate să se implice social cu oamenii. Cu toate acestea, pentru a urmări această agendă, problema decepției și IA trebuie formulată în termeni noi.

DESPRE OAMENI, MAȘINI ȘI „ÎNșeCELIA BANALĂ”

Când marele istoric de artă Ernst Gombrich și-a început investigația asupra rolului iluziei în istoria artei, și-a dat seama că artele figurative apar în cadrul unei interacțiuni între limitele tradiției și limitele percepției. Artiștii au încorporat întotdeauna decepția în munca lor, bazându-se pe cunoștințele lor atât despre convenții, cât și despre mecanismele de percepție pentru a obține anumite efecte asupra privitorului.9 Dar cine ar învinovăți un pictor talentat pentru că folosește înșelăciunea jucându-se cu perspectiva sau profunzimea pentru a realiza un tablou arata mai convingator si mai “reai” in ochii observatorului?

Deși acest lucru este ușor de acceptat de la un artist, ideea că un dezvoltator de software folosește cunoștințe despre modul în care utilizatorii sunt înșelați pentru a îmbunătăți interacțiunea om-calculator este probabil să întâmpine îngrijorare și critici. De fapt, deoarece termenul deception este de obicei asociat cu eforturi răutăcioase, comunitățile AI și informatică s-au dovedit rezistente la a discuta despre munca lor în termeni de deception sau au discutat despre decepție ca pe un rezultat nedorit.10 Totuși, această carte susține că decepția este un element constitutiv al interacțiunilor om-calculator înrădăcinate în tehnologiile AI. Suntem, ca să spunem așa, programați să fim înșelați, iar mass-media moderne au apărut în spațiile deschise de limitele și posibilitățile capacității noastre de a cădea în iluzie. În ciuda rezistenței lor
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pentru a considera decepția ca atare, informaticienii au lucrat încă din istoria timpurie a domeniului lor pentru a exploata limitele și posibilitățile percepției și intelectului nostru.11

Decepția, în sensul său larg, implică utilizarea unor semne sau reprezentări pentru a transmite o impresie falsă sau înșelătoare. O mulțime de cercetări în domenii precum psihologia socială, filozofia și sociologia au arătat că decepția este un fapt inevitabil al vieții sociale cu un rol funcțional în interacțiunea socială și comunicare.12 Deși situațiile în care decepția este intenționată și manifestă, cum ar fi fraudele , înșelătoriile și minciunile flagrante, modelează înțelegerile populare despre decepție, oamenii de știință au subliniat prezența mai deghizată și obișnuită a decepției în experiența de zi cu zi.13 Multe forme de decepție nu sunt atât de clare și, în multe cazuri, decepția nici măcar nu este înțeleasă ca astfel.14

Trecând dintr-o perspectivă fenomenologică, filozoful Mark A. Wrathall a susținut cu influență că capacitatea noastră de a fi înșelați este o calitate inerentă a experienței noastre. În timp ce decepția este înțeleasă în mod obișnuit în termeni binari, postulând că cineva poate fi sau nu înșelat, Wrathall susține că o astfel de dihotomie nu ține cont de modul în care oamenii percep și înțeleg realitatea externă: „rar are sens să spun că am perceput fie cu adevărat. sau fals”, deoarece posibilitatea decepției este înrădăcinată în mecanismele percepției noastre. Dacă, de exemplu, mă plimb prin pădure și cred că văd o căprioară lângă mine unde, de fapt, este doar un tufiș, sunt înșelat; totuși, același mecanism care m-a făcut să văd o căprioară acolo unde nu era – adică tendința și capacitatea noastră de a identifica tipare în informațiile vizuale – m-ar fi ajutat, cu altă ocazie, să identific un pericol potențial. Faptul că simțurile noastre au deficiențe, subliniază Wrathall, reprezintă o resursă la fel de mult ca o limită pentru percepția umană și este funcțional pentru capacitatea noastră de a naviga în lumea externă.15 Dintr-un punct de vedere similar, psihologul cognitiv Donald D. Hoffman recent. a propus că evoluția ne-a modelat percepțiile în iluzii utile care ne ajută să navigăm în lumea fizică, dar care pot fi, de asemenea, manipulate prin tehnologie, publicitate și design.16

Într-adevăr, instituționalizarea psihologiei la sfârșitul secolului al XIX-lea și începutul secolului XX a semnalat deja descoperirea că decepția și iluzia erau aspecte fiziologice integrale ale psihologiei percepției.17 Înțelegerea decepției era importantă nu prea mult sau nu numai pentru a studia modul în care oamenii au înțeles greșit. lumea, dar și pentru a studia modul în care au perceput-o și a navigat în ea.18 În timpul secolelor al XIX-lea și al XX-lea, acumularea de cunoștințe despre modul în care oamenii au fost înșelați a informat dezvoltarea unei game largi de tehnologii și practici media, a căror eficiență a exploatat posibilitățile și limitările.
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a simțurilor noastre de a vedea, auz și atinge.19 După cum demonstrez în acest cârlig, dezvoltatorii AI, pentru a-și produce rezultatele, au continuat această tradiție a tehnologiilor care ne mobilizează responsabilitatea față de decepție. Oamenii de știință din inteligența artificială au colectat informații și cunoștințe despre modul în care utilizatorii reacționează la mașinile care prezintă aspectul unor comportamente inteligente, încorporând aceste cunoștințe în proiectarea software-ului și a mașinilor.

O obiecție potențială la această abordare este că ea dizolvă însuși conceptul de deception prin echivalarea acestuia cu percepția „normală”. Totuși, susțin că respingerea unei înțelegeri binare a decepției ne ajută să realizați că decepția implică un spectru larg de situații care au rezultate foarte diferite, dar și caracteristici comune. Dacă la un capăt al spectrului există încercări explicite de a induce în eroare, de a comite fraude și de a spune minciuni, la celălalt capăt există forme de înșelăciune care nu sunt atât de clare și care, în multe cazuri, nu sunt înțelese ca atare. 20 Numai prin identificarea și studierea dinamicii mai puțin evidente ale decepției putem dezvolta o înțelegere deplină a cazurilor mai evidente și mai clare de decepție. Prin urmare, subliniind centralitatea decepției, nu intenționez să sugerez că toate formele de IA au scopuri hipnotice sau manipulative. Scopul meu principal nu este să stabilesc dacă AI este „bună” sau „rea”, ci să explorez o dimensiune crucială a AI și să întreb cum ar trebui să procedăm ca răspuns la aceasta.

Roboții de acasă precum Jibo și chatbot-ii însoțitori, cum ar fi Replika, de exemplu, sunt proiectați să pară drăguți și să trezească sentimente de empatie în proprietarii lor. Această alegere de design pare în sine inofensivă și binevoitoare, aceste tehnologii pur și simplu funcționează mai bine dacă aspectul și comportamentul lor stimulează sentimente pozitive la utilizatori.21 Aceleași caracteristici, totuși, vor părea mai puțin inocente dacă companiile care produc aceste sisteme încep să profite de aceste sentimente. pentru a influența opiniile politice ale utilizatorilor. Roboții de acasă și chatboții însoțitori, împreună cu o gamă largă de tehnologii AI programate pentru a intra în comunicare cu oamenii, încorporează structural forme de decepție: elemente precum aspectul, vocea umană și utilizarea expresiilor specifice limbajului sunt concepute pentru a produce efecte specifice. în utilizator. Ceea ce face ca acest lucru să fie mai puțin sau mai acceptabil nu este întrebarea dacă există sau nu decepție, ci care sunt rezultatele și implicațiile efectelor înșelătoare produse de orice tehnologie AI dată. Lărgirea definiției decepției, în acest sens, poate duce la îmbunătățirea înțelegerii noastre a riscurilor potențiale ale AI și tehnologiilor conexe, contracarând puterea companiilor care câștigă din interacțiunile utilizatorului cu aceste tehnologii și stimulând investigații mai ample pentru a stabili dacă astfel de interacțiuni prezintă. orice prejudiciu potențial adus utilizatorului.
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Pentru a distinge de decepția directă și deliberată, propun conceptul de deception banală pentru a descrie mecanismele și practicile înșelătoare care sunt încorporate în tehnologiile media și contribuie la integrarea lor în viața de zi cu zi. Decepția banală implică situații banale, de zi cu zi, în care tehnologiile și dispozitivele mobilizează elemente specifice ale percepției și psihologiei utilizatorului - de exemplu, în cazul AI, tendința prea umană de a atribui agenție lucrurilor sau personalitatea vocilor. Cuvântul „banal” descrie lucruri care sunt respinse ca fiind obișnuite și neimportante; Folosirea de către mine a acestui cuvânt urmărește să sublinieze că aceste mecanisme sunt adesea luate de la sine înțeles, în ciuda impactului lor semnificativ asupra utilizărilor și apropriărilor tehnologiilor media și sunt profund încorporate în viața de zi cu zi, „obișnuită”.22

Spre deosebire de abordările decepției deliberate sau directe, decepția banală nu înțelege utilizatorii și publicul ca fiind pasivi sau naivi. Dimpotrivă, publicul își exploatează în mod activ propria capacitate de a cădea în decepție în moduri sofisticate – de exemplu, prin divertismentul de care se bucură atunci când cad în iluziile oferite de cinema sau de televiziune. Același mecanism rezonează cu cazul AI. Studiile privind interacțiunea om-calculator arată în mod constant că utilizatorii care interacționează cu computerele aplică norme și comportamente pe care le-ar adopta cu oamenii, chiar dacă acești utilizatori înțeleg perfect diferența dintre computere și oameni.23 La prima vedere, acest lucru pare incongru, ca și cum utilizatorii rezistă. și îmbrățișează deception simultan. Conceptul de decepție banală oferă o soluție a acestei aparente contradicții. Susțin că dinamica subtilă a decepției banale le permite utilizatorilor să îmbrățișeze deception, astfel încât să poată încorpora mai bine AI în viața lor de zi cu zi, făcând AI mai semnificativă și mai utilă pentru ei. Aceasta nu înseamnă că decepția banală este inofensivă sau inofensivă. Structurile de putere rezidă adesea în lucruri banale, obișnuite, iar decepția banală poate avea în sfârșit consecințe mai profunde pentru societăți decât cele mai evidente și evidente încercări de a înșela.

De-a lungul acestei cărți, identific și evidențiez cinci caracteristici cheie care disting decepția banală. Primul este caracterul său cotidian și obișnuit. Când cerceta percepțiile oamenilor despre asistenții vocali AI, Andrea Guzman a fost surprinsă de ceea ce a simțit că este o discontinuitate între reprezentările obișnuite ale AI și răspunsurile intervievaților ei.24 Inteligența artificială este de obicei concepută și discutată ca extraordinară: un vis sau un coșmar care trezește întrebări metafizice și provoacă însăși definiția a ceea ce înseamnă a fi om.25 Cu toate acestea, atunci când Guzman a abordat utilizatori de sisteme precum Siri, asistentul vocal AI integrat în iPhone-uri și alte dispozitive Apple, ea nu a constatat că utilizatorii puneau întrebări. granițele dintre oameni și mașini.
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În schimb, participanții reflectau asupra temelor similare celor care caracterizează și alte tehnologii media. Ei întrebau dacă folosirea asistentului AI îi face leneși sau dacă este nepoliticos să vorbești la telefon în prezența altora. După cum observă Guzman, „nici tehnologia și nici impactul ei asupra sinelui din perspectiva utilizatorilor nu păreau extraordinare; mai degrabă, sinele în relație cu IA vorbitoare părea, ei bine, obișnuit – la fel ca orice altă tehnologie.”26 Acest caracter obișnuit al AI este ceea ce face ca decepția banală să fie atât de imperceptibilă, dar în același timp atât de importantă. Este ceea ce se pregătește pentru integrarea tehnologiilor AI în țesăturile experienței de zi cu zi și, ca atare, în miezul identității și al sinelui nostru.27

A doua caracteristică a decepției banale este funcționalitatea. Decepția banală are întotdeauna o valoare potențială pentru utilizator. Interacțiunea om-calculator a folosit în mod regulat reprezentări și metafore pentru a construi sisteme liniștitoare și ușor de înțeles, ascunzând complexitatea sistemului de calcul în spatele interfeței.28 După cum a menționat de Michael Black, „manipularea percepției utilizatorilor asupra sistemelor software prin denaturarea strategică a operațiunilor lor interne este adesea cheia pentru a produce experiențe culturale convingătoare prin intermediul software-ului.”29 Folosind aceeași logică, sistemele AI comunicative mobilizează decepția pentru a obține efecte semnificative. Faptul că utilizatorii se comportă social atunci când interacționează cu asistenții vocali AI, de exemplu, are o serie de beneficii pragmatice: facilitează integrarea acestor instrumente în mediile domestice și în viața de zi cu zi și oferă posibilități de interacțiune jucăușă și recompensă emoțională. 30 A fi înșelat, în acest context, trebuie privit nu ca o interpretare greșită de către utilizator, ci ca un răspuns la avantajele specifice codificate în tehnologia însăși.

A treia caracteristică a decepției banale este uitarea: faptul că decepția nu este înțeleasă ca atare, ci este luată de la sine înțeles și de necontestat. Conceptul de „comportament fără minte” a fost deja folosit pentru a explica contradicția aparentă, menționată mai devreme, a utilizatorilor de inteligență artificială înțelegând că mașinile nu sunt umane, ci încă într-o oarecare măsură le tratează ca atare.31 Cercetătorii au folosit psihologia cognitivă pentru a descrie lipsa de minte ca „o dependență excesivă de categorii și distincții trasate în trecut și în care individul este dependent de context și, ca atare, nu are în vedere aspectele noi (sau pur și simplu alternative) ale situației.”32 Problema acestei abordări este aceea că implică o distincție rigidă între atenție și lipsă de minte prin care numai cea din urmă duce la decepție. Cu toate acestea, atunci când utilizatorii interacționează cu inteligența artificială, ei reproduce și comportamentele și obiceiurile sociale în moduri conștiente și reflexive. De exemplu, utilizatorii efectuează schimburi jucăușe cu asistenți vocali AI, deși ei
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știu prea bine că mașina nu va înțelege cu adevărat glumele lor. Le urează noapte bună înainte de a merge la culcare, chiar dacă sunt conștienți că nu vor „adormi” în același sens ca oamenii.33 Acest lucru sugerează că distincțiile dintre comportamentele conștiente și cele lipsite de minte nu reușesc să surprindă complexitatea interacțiunii. În schimb, uitarea implică faptul că, deși utilizatorii nu tematizează decepția ca atare, ei se pot angaja în interacțiuni sociale cu mașina în mod deliberat și inconștient. De asemenea, uitarea permite utilizatorului să mențină cel puțin iluzia controlului – acesta fiind, în era ușurinței de utilizare, un principiu cheie al designului software.34

A patra caracteristică a decepției banale este definiția sa scăzută. În timp ce acest termen este folosit în mod obișnuit pentru a descrie formate de reproducere video sau sunet cu rezoluție mai mică, în teoria media termenul a fost folosit și cu referire la mass-media care solicită mai multă participare din partea publicului și a utilizatorilor la construirea sensului și a sensului35. se referă la AI, interfețele textuale și vocale au o definiție scăzută, deoarece lasă un spațiu amplu pentru ca utilizatorul să-și imagineze și să atribuie caracteristici precum genul, rasa, clasa și personalitatea vocii sau textului neîncarnat. De exemplu, asistenții vocali nu prezintă la nivel fizic sau vizual aspectul personajului virtual (cum ar fi „Alexa” sau „Siri”), dar unele indicii sunt încorporate în sunetele vocii lor, în numele lor și în conţinutul schimburilor lor. Din acest motiv, așa cum se arată în cercetările despre percepțiile oamenilor despre asistenții vocali AI, diferiți utilizatori își imaginează asistenții AI în moduri diferite și multiple, ceea ce sporește și efectul personalizării tehnologiei pentru fiecare individ.36 În schimb, umanoid roboții lasă mai puțin spațiu imaginației și mecanismelor de proiecție ale utilizatorilor și, prin urmare, nu au o definiție scăzută. Acesta este unul dintre motivele pentru care asistenții vocali dezcorporați AI au devenit mult mai influenți astăzi decât roboții umanoizi: faptul că utilizatorii își pot proiecta propriile imaginații și semnificații face ca interacțiunile cu aceste instrumente să fie mult mai personale și mai liniștitoare și, prin urmare, sunt mai ușoare. să ne încorporăm în viața de zi cu zi decât roboții.37

A cincea și ultima caracteristică definitorie a decepției banale este că nu este doar impusă utilizatorilor, ci este și programată de designeri și dezvoltatori. Acesta este motivul pentru care cuvântul deception este preferabil iluziei, deoarece deception implică o formă de agenție, care permite o recunoaștere mai clară a modului în care dezvoltatorii de tehnologii AI lucrează pentru a obține efectele dorite. Pentru a explora și dezvolta mecanismele decepției banale, designerii trebuie să construiască un model sau o imagine a utilizatorului așteptat. În teoria actorului-rețea, aceasta corespunde noțiunii de scenariu, care se referă la munca inovatorilor ca „înscriind” viziuni sau predicții despre lume și utilizator în conținutul tehnic al noului obiect și
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tehnologie.38 Deși acesta este întotdeauna un exercițiu de imaginație, se bazează pe eforturi specifice pentru a obține cunoștințe despre utilizatori sau, mai general, despre „oameni”. Lucrările recente în interacțiunea om-calculator recunosc că „poate cel mai dificil aspect al interacțiunii cu oamenii este nevoia de a modela convingerile, dorințele, preferințele intențiilor și așteptările omului și de a situa interacțiunea în contextul acelui model.”39 Săpătura istorică întreprinsă în această carte arată că această muncă de modelare a utilizatorilor este la fel de veche ca AI în sine. De îndată ce sistemele interactive au fost dezvoltate, informaticienii și cercetătorii AI au explorat modul în care percepția umană și psihologia funcționau și au încercat să folosească astfel de cunoștințe pentru a reduce decalajul dintre computer și utilizator.40

Este important să subliniem că, pentru noi, să luăm în considerare agenția programatorilor și dezvoltatorilor care proiectează și pregătesc pentru utilizare AI Systems este perfect compatibilă cu recunoașterea că utilizatorii înșiși au agenție. Așa cum multe studii critice despre mediile digitale arată, de fapt, utilizatorii tehnologiilor și sistemelor digitale subminează și reformula adesea intențiile și așteptările companiilor și dezvoltatorilor.41 Totuși, aceasta nu înseamnă că aceștia din urmă nu au în vedere un rezultat așteptat. . Așa cum a remarcat recent Taina Bûcher, „credințele și valorile culturale deținute de programatori, designeri și creatorii de software contează”: ar trebui să le examinăm și să punem la îndoială intențiile lor, în ciuda numeroaselor dificultăți implicate în reconstruirea lor retroactiv din tehnologie și operațiunile sale. 42

Important este că faptul că decepția banală nu trebuie văzută implicit ca negativă nu înseamnă că dinamica sa nu ar trebui să facă obiectul unei investigații critice atente. Unul dintre obiectivele cheie ale acestei cărți este de a identifica și contracara practicile și implicațiile potențial problematice care apar ca urmare a încorporării decepției banale în IA. Dezvăluirea mecanismelor decepției banale, în acest sens, este, de asemenea, o invitație de a interoga ce înseamnă „umanul” în dezbaterile discursive și lucrările practice care modelează dezvoltarea IA. După cum demonstrează traiectoria descrisă în această carte, modelarea „umanului” care a fost dezvoltată de-a lungul istoriei IA a fost de fapt destul de limitată. Chiar dacă accesul la computer a fost extins progresiv la publicuri potențiale mai largi, dezvoltatorii au imaginat adesea utilizatorul așteptat ca pe un om alb, educat, perpetuând părtiniri care rămân inerente sistemelor informatice contemporane.43 În plus, studiile și ipotezele despre modul în care percep și percep utilizatorii. reacționează la reprezentări specifice de gen, rasă și clasă au fost implementate în proiectarea interfeței, conducând, de exemplu, la caracterizări de gen ale multor asistenți vocali AI contemporani.44
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O altă problemă este măsura în care mecanismele decepției banale încorporate în inteligența artificială schimbă convențiile și obiceiurile sociale care reglementează relațiile noastre atât cu oamenii, cât și cu mașinile. Pierre Bourdieu folosește conceptul de habitus pentru a caracteriza gama de dispoziții prin care indivizii percep și reacționează la lumea socială.45 Deoarece habitus se bazează pe experiențe anterioare, disponibilitatea oportunităților crescânde de a se angaja în interacțiuni cu computerele și AI este probabil să alimenteze. înainte în comportamentele noastre sociale în viitor. Titlul acestei cărți se referă la AI și la viața socială după testul Turing, dar chiar dacă un program de calculator capabil să treacă acel test nu a fost încă creat, dinamica decepției banale în IA reprezintă deja o influență inevitabil asupra vieții sociale a milioane de oameni din întreaga lume. Obiectivul principal al acestei cărți este de a neutraliza opacitatea decepției banale, scoțând la suprafață mecanismele acesteia pentru a înțelege mai bine noile sisteme AI care modifică societățile și viața de zi cu zi.

INTELIGENTA ARTIFICIALA, COMUNICARE, ISTORIA MEDIA

Inteligența artificială este un domeniu extrem de interdisciplinar, caracterizat printr-o serie de abordări, teorii și metode diferite. Unele aplicații bazate pe inteligență artificială, cum ar fi algoritmii de procesare a informațiilor care reglementează accesul la web, sunt o prezență constantă în viața de zi cu zi a maselor de oameni; altele, cum ar fi aplicațiile industriale ale inteligenței artificiale în fabrici și ateliere, sunt rareori, sau vreodată, întâlnite.46 Această carte se concentrează în special pe IA comunicativă, adică aplicațiile AI care sunt concepute pentru a intra în comunicare cu utilizatorii umani.47 Aïs comunicativ. includ aplicații care implică conversație și vorbire, cum ar fi procesarea limbajului natural, chatbots, social media bots și asistenți vocali AI. Grupul roboticii folosește unele dintre aceleași tehnologii dezvoltate pentru IA comunicativă – de exemplu pentru ca roboții să comunice printr-un sistem de dialog vocal – dar rămâne în afara domeniului acestei cărți. După cum a subliniat recent Andreas Hepp, de fapt, AI este mai puțin frecvent utilizată astăzi sub formă de artefacte fizice încorporate decât aplicațiile software.48 Această circumstanță, așa cum am menționat mai devreme, poate fi explicată prin faptul că computerele nu se potrivesc cu unul dintre caracteristicile cheie ale decepției banale: definiție scăzută.

IA comunicativă pleacă de la rolul istoric al mass-media ca simple canale de comunicare, deoarece IA acționează și ca un producător de comunicare, cu care oamenii (precum și alte mașini) schimbă mesaje.49 Cu toate acestea, IA comunicativă este încă un mijloc de comunicare și prin urmare
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moștenește multe dintre dinamicile și structurile care au caracterizat comunicarea mediată cel puțin de la apariția media electronică în secolul al XIX-lea. De aceea, pentru a înțelege noile tehnologii precum asistenții vocali AI sau chatboții, este vital să le contextualizați în istoria mass-media.

Ca tehnologii de comunicare, mass-media se bazează pe psihologia și percepția umană și este posibil să privim istoria mass-media în ceea ce privește modul în care efectele înșelătoare au fost încorporate în diferite tehnologii media. Cinematograful își realizează efectele prin exploatarea limitelor percepției umane, cum ar fi impresia de mișcare care poate fi dată prin succesiunea rapidă a unei serii de imagini stili.50 În mod similar, așa cum a arătat pe bună dreptate Jonathan Sterne, dezvoltarea mediilor sonore a pornit din cunoștințe despre caracteristicile fizice și psihologice ale auzului și ascultării umane.51 În acest sens, evenimentul cheie al istoriei mass-media din secolul al XIX-lea nu a fost inventarea vreunei noi tehnologii precum telegraful, fotografia, cinematografia, televiziunea sau calculatorul. În schimb, apariția noilor științe umane, de la fiziologie și psihologie până la științele sociale, a oferit cunoștințele și cadrul epistemologic pentru a adapta mediile moderne la caracteristicile senzoriului și intelectului uman.

Cu toate acestea, studiul mass-media a căzut adesea în aceeași capcană ca și cei care cred că decepția în IA contează doar dacă este „deliberată” și „directă”. puterea de manipulare a mass-media, mai degrabă decât recunoașterea rolului structural decepțiilor în mass-media moderne. Conform unei anecdote apocrife, dar persistente, de exemplu, publicul timpuriu al filmelor a schimbat reprezentarea cu realitate și a intrat în panică în fața imaginii unui tren care sosește.53 În mod similar, în povestea emisiunii radio a lui Orson Welles Războiul Lumilor, pe care mulți ar fi interpretat-o ca un Raportul despre o invazie extraterestră reală, transmisiile în direct i-au determinat pe oameni să confunde ficțiunea cu realitatea.54 În timp ce astfel de cazuri flagrante (și adesea exagerate) de decepție au atras multă atenție, puțini au reflectat asupra faptului că decepția este o caracteristică cheie a tehnologiilor media. „funcția — acea decepție, cu alte cuvinte, nu este o caracteristică incidentală, ci o caracteristică iremediabilă a tehnologiilor media.55

Pentru a descoperi antecedentii inteligenței artificiale și ai roboticii, istoricii indică în mod obișnuit automate, mașini autonome care imită comportamentul și mișcările oamenilor și animalelor.56 Exemple notabile din această linie includ rața mecanică construită de inventatorul francez Jacques de Vaucanson în 1739, care a arătat abilitățile de a mânca, digera și defeca,
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și turcul mecanic, care a uimit publicul din Europa și America la sfârșitul secolului al XVIII-lea și începutul secolului al XIX-lea, cu priceperea sa în a juca șah.57 Luând în considerare relația dintre AI și decepție, aceste automate sunt cu siguranță un exemplu concret, deoarece inteligența lor aparentă. a fost rezultatul manipulării de către creatorii lor: rața mecanică avea fecale depozitate în interiorul său, astfel încât să nu aibă loc nicio digestie efectivă, în timp ce turcul a fost manevrat de un jucător uman ascuns în interiorul mașinii. Pentru a înțelege relația mai largă dintre inteligența artificială contemporană și decepție, trebuie să pătrundem într-un context istoric mai larg, care depășește istoria automatelor și a mașinilor programabile. Acest context este istoria mass-mediei înșelătoare, adică a modului în care mediile și practicile diferite, de la pictură și teatru la înregistrarea sunetului, televiziune și cinema, au integrat decepția banală ca strategie pentru a obține efecte speciale în public și utilizatori. Urmărirea acestei traiectorii arată că o parte din dinamica AI comunicativă se află într-o relație de continuitate cu modul în care publicul și utilizatorii au proiectat sens asupra altor medii și tehnologie.

Examinând istoria IA comunicativă de la propunerea testului Turing din 1950 până în prezent, mi-am întemeiat munca pe convingerea că o abordare istorică a schimbărilor media și tehnologice ne ajută să înțelegem transformările în curs în sfera socială, culturală și politică. . Savanți precum Lisa Gitelman, Erkki Huhtamo și Jussi Parikka au arătat în mod convingător că ceea ce se numește acum „noile media” au o istorie lungă, al cărei studiu este necesar pentru a înțelege cultura digitală de astăzi.59 Dacă este adevărat că istoria este una dintre cele mai bune instrumente pentru înțelegerea prezentului, cred că este și unul dintre cele mai bune instrumente, deși încă imperfect, pentru anticiparea viitorului. În domeniile de dezvoltare rapidă, cum ar fi IA, este extrem de dificil să se prognozeze chiar și dezvoltarea pe termen scurt și mediu, cu atât mai puțin schimbările pe termen lung. traiectorii de schimbare care au caracterizat domeniul de-a lungul mai multor decenii și, prin urmare, ar putea continua să-l modeleze în viitor. Deși este important să înțelegem cum funcționează inovațiile recente, cum ar fi rețelele neuronale și învățarea profundă, este nevoie și de o mai bună înțelegere a direcțiilor prin care ñeld s-a deplasat într-un interval de timp mai lung. Istoria mass-media, în acest sens, este o știință a viitorului: nu numai că aruncă lumină asupra dinamicii prin care am ajuns acolo unde ne aflăm astăzi, dar ne ajută să punem noi întrebări și probleme prin care putem să depășim provocările tehnice și sociale care urmează. 61
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Urmând Lucy Suchman, folosesc termenii „interacțiune” și „comunicare” în mod interschimbabil, deoarece interacțiunea implică stabilirea comunicării între diferite entități.62 Abordările timpurii în interacțiunea om-calculator au recunoscut că interacțiunea a fost întotdeauna concepută ca o relație comunicativă, iar ideea că computerul este atât un canal, cât și un producător de comunicare este mult mai vechi decât se presupune adesea.63 Deși IA și interacțiunea om-calculator sunt de obicei încadrate ca fiind separate, considerându-le limite distincte capacitatea istoricilor și comunicatorilor contemporani de a înțelege dezvoltarea și impactul acestora. Încă de la originile domeniului lor, cercetătorii AI au reflectat asupra modului în care dispozitivele computaționale ar putea intra în contact și dialog cu utilizatorii umani, aducând problemele și întrebările relevante pentru interacțiunea om-calculator în centrul propriei investigații. Explorarea intersecțiilor dintre aceste câmpuri ajută la înțelegerea faptului că acestea sunt unite printr-un principiu cheie: că atunci când un utilizator interacționează cu tehnologia, responsabilitatea pentru rezultatul unei astfel de interacțiuni este împărțită între tehnologie și om.

La nivel teoretic, cartea este îndatorată cu perspective din diferite domenii disciplinare, de la teoria acțiunii-rețele la antropologia socială, de la teoria media la studiile filmului și istoria artei. Folosesc aceste cadre diverse ca instrumente pentru a propune o abordare a AI și a tehnologiilor digitale care subliniază participarea oamenilor la construirea sensului. După cum ne-au învățat lucrările în teoria actorilor-rețele, precum și antropologii sociali precum Armin Appadurai și Alfred Geli, nu numai oamenii, ci și artefactele pot fi considerate agenți sociali în anumite situații sociale.64 Oamenii atribuie adesea intențiile obiectelor și obiectelor. mașini: de exemplu, proprietarii de mașini atribuie personalități mașinilor lor, iar copiii păpușilor lor. Lucrurile, ca și oamenii, au vieți sociale, iar sensul lor este negociat continuu și încorporat în relațiile sociale.65

În studiile media, examinările cercetătorilor cu privire la implicațiile acestei descoperiri s-au mutat de la reflecții de decenii asupra audiențelor mass-media, cum ar fi radioul, cinematograful și televiziunea, la dezvoltarea unui nou accent pe relațiile interactive dintre computere și utilizatori. În The Media Equation, o lucrare fundamentală publicată la mijlocul anilor 1990, Byron Reeves și Clifford Nass susțin că avem tendința de a trata mass-media, inclusiv dar nu numai computerele, în conformitate cu regulile interacțiunii sociale.66 Studii ulterioare ale lui Nass, Reeves , și alți colaboratori au stabilit ceea ce este cunoscut sub numele de paradigma Computers Are Social Actors, care susține că oamenii aplică reguli și așteptări sociale computerelor și au explorat implicațiile noilor interfețe care vorbesc și ascultă.
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utilizatorilor, care devin din ce în ce mai disponibile în computere, mașini, centre de cali, medii domestice și jucării.67 O altă contribuție crucială la astfel de eforturi este cea a Sherry luride. De-a lungul mai multor decenii, cercetările au explorat interacțiunile dintre oameni și inteligența artificială, subliniind modul în care relația lor nu decurge din faptul că obiectele computaționale au într-adevăr emoții sau inteligență, ci din ceea ce evocă la utilizatorii lor.68

Deși rolul decepției este rareori recunoscut în discuțiile despre IA, susțin că interogarea implicațiilor etice și culturale ale unor astfel de dinamici este o sarcină urgentă care trebuie abordată prin reflecție interdisciplinară la intersecția dintre informatică, științe cognitive, științe și științe umaniste. În timp ce dezbaterea publică privind viitorul AI tinde să se concentreze pe ipoteza că AI va face computerele la fel de inteligente sau chiar mai inteligente decât oamenii, trebuie să luăm în considerare și consecințele culturale și sociale ale mass-media înșelătoare care oferă apariția inteligenței. În acest sens, obsesia contemporană pentru viziunile apocaliptice și futuriste ale inteligenței artificiale, cum ar fi singularitatea, superinteligența și apocalipsa roboților, ne face mai puțin conștienți de faptul că cele mai semnificative implicații ale sistemelor AI sunt de văzut nu în un viitor îndepărtat, dar în interacțiunile noastre continue cu mașinile „inteligente”.

Tehnologia este modelată nu numai de agenția de oameni de știință, designeri, antreprenori, utilizatori și factori de decizie, ci și de tipurile de întrebări pe care le punem despre ea. Acest cârlig speră să inspire cititorii să pună noi întrebări despre relația dintre oameni și mașini în lumea de astăzi. Va trebui să începem să căutăm noi înșine răspunsuri, deoarece mașinile „inteligente” pe care le creăm nu pot oferi nicio îndrumare în astfel de chestiuni - așa cum a recunoscut una dintre acele mașini când am întrebat-o (1.1).
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CARTA 1

Testul Turing

Viața culturală a unei idei

La mijlocul secolului al XIX-lea, mesele și-au luat brusc o viață proprie.

A început într-un orășel din nordul statului New York, unde două surori adolescente, Margaret și Kate Fox, s-au angajat în comunicare cu spiritul unui om mort. Curând s-a răspândit vestea, mai întâi în Statele Unite și apoi în alte țări, iar până în 1850 un număr tot mai mare de oameni s-au alăturat ședințelor spiritualiste. Fenomenele observate au fost extraordinare. După cum a relatat un martor contemporan, „mesele se înclină fără a fi atinse, iar obiectele de pe ele rămân imobile, contrazicând toate legile fizicii. Pereții tremură, mobilierul bate din picioare, candelabrele plutesc, voci necunoscute plâng de nicăieri — toată fantasmagoria invizibilului populează lumea reală.”1

Printre cei care și-au propus să pună la îndoială originile acestor fenomene ciudate s-a numărat și omul de știință britanic Michael Faraday. Interesul său nu a fost întâmplător: mulți au explicat întoarcerea mesei și alte minuni spiritualiste ca fenomene de electricitate și magnetism, iar Faraday și-a dedicat viața progresului cunoștințelor științifice în aceste domenii.2 Rezultatele investigațiilor sale, totuși, ar indica o interpretare diferită. . El a susținut că cauzele mișcărilor meselor nu trebuiau căutate în forțe externe precum electricitatea și magnetismul. A fost mult mai util să luăm în considerare experiența celor care au participat la ședințe. Pe baza observațiilor sale, el a susținut că ședinții și médiums la ședințele spiritiste nu numai că au perceput lucruri care nu existau, ci chiar au provocat unele dintre fenomenele fizice. Mișcările lui
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masa de ședințe putea fi explicată prin dorința lor inconștientă de a se înșela, ceea ce i-a determinat să miște masa involuntar.

Nu spiritele morților au făcut spiritismul, a subliniat Faraday. Oamenii vii – noi, oamenii – au fost cei care l-au creat.3

Roboții și computerele nu sunt spirite, dar povestea lui Faradays oferă o lentilă utilă prin care să luăm în considerare apariția inteligenței artificiale dintr-o perspectivă neobișnuită. La sfârșitul anilor 1940 și începutul anilor 1950, adesea descrisă drept perioada de gestație a IA, cercetările din nou-născuta știință a calculului au pus tot mai mult accent pe posibilitatea ca calculatoarele electronice digitale să se dezvolte în „mașini care gândesc.”4 Istoricii culturii, știința și tehnologia au arătat cum aceasta a implicat o ipoteză a unei echivalențe între creierul uman și mașinile de calcul.5 În acest capitol, însă, îmi propun să demonstrez că apariția IA a implicat și un alt tip de descoperire. Unii dintre pionierii noului domeniu și-au dat seama că posibilitatea mașinilor de gândire depindea atât de perspectiva observatorilor, cât și de funcționarea computerelor. Așa cum Faraday în anii 1850 a sugerat că spiritele existau în mințile ședințelor de ședință, acești cercetători au contemplat ideea că IA se află nu atât în circuite și tehnici de programare, cât în felul în care oamenii percep și reacționează la interacțiunile cu mașinile. Cu alte cuvinte, au început să-și imagineze posibilitatea ca în primul rând utilizatorii, nu computerele, cei care „au făcut” AI.

Această conștientizare nu a apărut în jurul unui singur individ, unui singur grup sau chiar a unui singur domeniu de cercetare. Cu toate acestea, o contribuție în domeniul gestațional al IA este deosebit de relevantă: „Jocul de imitație”, un experiment de gândire propus în 1950 de Alan Turing în articolul său „Computing Machinery and Intelligence”. Turing a descris un joc - astăzi mai frecvent cunoscut sub numele de testul Turing - în care un interogator uman comunică atât cu agenți umani, cât și cu agenți informatici, fără să le cunoască identitățile și este provocat să distingă oamenii de mașini . O dezbatere plină de viață despre testul Turing a început la scurt timp după publicarea articolului lui Turing și continuă și astăzi, prin critici nerce, aprobări entuziaste și interpretări contrastante.6 În loc să intru în dezbatere oferind o lectură unică sau privilegiată, scopul meu aici este să luminez unul dintre cele mai multe fire pe care le-a deschis ideea lui Turing pentru noul AI ñeld. Susțin că, așa cum Faraday a plasat rolul oamenilor în centrul întrebării cu privire la ceea ce s-a întâmplat în ședințele spiritualiste, Turing a propus să definească AI în termeni de perspectiva utilizatorilor umani în interacțiunile lor cu computerele. Testul Turing va servi aici ca o lentilă teoretică mai mult decât ca dovadă istorică – un spațiu reflectorizant care ne invită să interogăm trecutul, prezentul și viitorul AI dintr-un punct de vedere diferit.
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EXISTĂ CEVA CA UN ΤΗ ÎN MAȘINA Kl NC?

Inteligența artificială a apărut la mijlocul secolului al XX-lea, la intersecția dintre cibernetică, teoria controlului, cercetarea operațională, psihologia și nou-născuta informatică. În acest context, cercetătorii și-au arătat obiectivul ambițios de a integra aceste domenii de cercetare, astfel încât să se îndrepte către implementarea inteligenței umane în general, aplicabilă oricărui domeniu al activității umane, de exemplu limbaj, viziune și rezolvarea problemelor. În timp ce întemeierea AI este de obicei datată din 1956, care coincide cu o conferință revoluționară la care a fost introdus termenul AI, cercetătorii au început să se implice în problema „inteligenței mașinilor” și a „mașinilor care gândesc” cel puțin încă de la începutul anilor 1940. , în coincidență cu dezvoltarea primelor calculatoare electronice digitale.7 În acele timpuri de început, deoarece computerele erau folosite în cea mai mare parte pentru a efectua calcule care necesitau prea mult timp pentru a fi finalizate de oameni, imaginându-se că computerele vor prelua sarcini precum scrierea în limbaj natural. , compunerea muzicii, recunoașterea imaginilor sau jocul de șah necesitau destulă imaginație. Dar pionierii care au modelat apariția ñeldului nu le-a lipsit viziunea. Cu ani înainte ca hardware-ul și software-ul propriu-zis să fie creat care ar putea face față unor astfel de sarcini, gânditori precum Claude Shannon, Norbert Wiener și Alan Turing, printre alții, erau încrezători că era doar o chestiune de timp până când astfel de fapte vor fi realizate.8

Dacă potențialul computerelor electronice de a prelua din ce în ce mai multe sarcini era clar pentru mulți, la fel au fost, totuși, provocările cu care se confruntă câmpul în plină dezvoltare. Care a fost această „inteligență” care trebuia să caracterizeze noile mașini? Cum s-a comparat cu inteligența umană? A avut sens să descriem procesele electronice și mecanice ale computerelor drept „gândire”? Și a existat vreo analogie fundamentală între funcționarea creierului uman și a mașinilor care funcționau prin calcularea numerelor? Unii, precum cei doi oameni de știință americani Warren McCulloch, un neurofiziolog și Walter Pitts, un logician, credeau că raționamentul uman poate fi formalizat matematic prin logică și calcul și au formulat un model matematic al activității neuronale care a pus bazele succesului. aplicații, decenii mai târziu, ale rețelelor neuronale și ale tehnologiilor de învățare profundă.9 Opinia conform căreia creierul ar putea fi comparat și înțeles ca o mașină a fost împărtășită și de fondatorul ciberneticii, Norbert Wiener.10

Un alt mod potențial de a aborda aceste întrebări a apărut și în această perioadă. A fost rezultatul, într-un fel, al unui eșec. Mulți și-au dat seama că ecuația dintre computere și oameni nu a rezistat unui control atent. Acest lucru sa datorat nu numai limitărilor tehnice ale computerelor
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timp. Chiar dacă computerele ar putea în cele din urmă rivaliza sau chiar depăși oamenii în sarcinile care au fost considerate a necesita inteligență, ar exista încă puține dovezi care să le compare operațiunile cu ceea ce se întâmplă în propriile minți ale oamenilor. Problema poate fi ilustrată destul de bine folosind argumentul prezentat de filozoful Thomas Nagel într-un articol extrem de faimos publicat două decenii mai târziu, în 1974, intitulat „Cum este să fii un liliac?” Nagel demonstrează că chiar și o perspectivă precisă a ceea ce se întâmplă în creierul și corpul unui liliac nu ne-ar face capabili să evaluăm dacă liliacul este conștient. Deoarece conștiința este o experiență subiectivă, trebuie să fii „în interiorul” liliacului pentru a face asta.11 Transferat în problema inteligenței mașinilor, în ciuda realizărilor extraordinare ale computerului, „inteligența” lor nu ar fi similară sau egală cu cea a oamenilor. Deși toți avem o anumită înțelegere a ceea ce este „gândirea”, pe baza propriei experiențe subiective, nu putem ști dacă alții, și în special ființele non-umane, împărtășesc aceeași experiență. Prin urmare, nu avem nicio modalitate obiectivă de a ști dacă mașinile „gândesc”.12

Un matematician instruit care s-a angajat cu probleme filozofice doar ca interes personal, Turing a fost departe de sofisticarea filozofică a argumentelor lui Nagel. Până la urmă, obiectivul lui Turing a fost să ilustreze promisiunile computerului modern, nu să dezvolte o filozofie a minții. Cu toate acestea, el și-a arătat preocupări similare în lansarea „Computer Machinery and Intelligence” (1950). În introducere, el ia în considerare întrebarea „Pot mașinile să gândească?” doar pentru a-l declara de puțin folos, din cauza dificultății de a găsi un acord cu privire la semnificațiile cuvintelor „mașină” și „gândește”. Prin urmare, el propune să înlocuiască această întrebare cu alta și, prin urmare, introduce Jocul Imitației ca o modalitate mai sensibilă de a aborda problema:

Noua formă a problemei poate fi descrisă în termenii unui joc pe care îl numim „jocul de imitație”. Se joacă cu trei persoane, un bărbat (A), o femeie (B) și un interogator (C) care pot fi de ambele sexe. Interogatorul stă într-o cameră în afară de celelalte două. Scopul jocului pentru interogator este de a determina care dintre ceilalți doi este bărbatul și care este femeia. . . . Acum punem întrebarea „Ce se va întâmpla când o mașină ia rolul lui A în acest joc?” Va decide greșit interogatorul la fel de des când jocul se joacă așa cum face atunci când jocul se joacă între un bărbat și o femeie? Aceste întrebări înlocuiesc originea noastră, „Pot mașinile să gândească?”13

După cum au mărturisit unii dintre cunoscuții săi, Turing a intenționat ca articolul să nu fie atât o contribuție la filosofie sau informatică, cât o formă de propagandă care ar stimula filozofii, matematicienii,
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iar oamenii de știință să se angajeze mai serios în problema inteligenței mașinilor.14 Dar indiferent dacă el a considerat-o de fapt ca atare, nu există nicio îndoială că testul s-a dovedit a fi un instrument excelent de propagandă pentru ñeld. Pornind de la ideea puternică că un „creier de computer” ar putea învinge oamenii într-una dintre abilitățile care ne definesc inteligența, utilizarea limbajului natural, testul Turing a prezentat potențialele dezvoltări ale AI într-un mod intuitiv și fascinant.15 În următoarele decenii. , a devenit o referință de bază în publicațiile populare care prezintă realizările și potențialele computerului. A forțat cititorii și comentatorii să ia în considerare posibilitatea IA – chiar dacă doar o respinge ca fiind science fiction sau șarlatanie.

LOCUL OMULUI

Articolul lui Turing a fost ambiguu în multe privințe, ceea ce a favorizat apariția diferitelor opinii și controverse cu privire la semnificația testului Turing.16 Cu toate acestea, una dintre implicațiile cheie pentru domeniul IA este evidentă. Întrebarea, le spune Turing cititorilor săi, nu este dacă mașinile sunt sau nu capabile să gândească. Este, în schimb, dacă credem că mașinile sunt capabile să gândească - cu alte cuvinte, dacă suntem pregătiți să acceptăm comportamentul mașinilor ca fiind inteligent. În acest sens, Turing a întors problema IA exact așa cum a făcut Faraday cu spiritismul. La fel cum oamenii de știință victorian considerau oamenii și nu spiritele responsabile pentru producerea fenomenelor spiritualiste la ședințe, testul Turing a plasat oamenii mai degrabă decât mașinile în centrul problemei AI. Deși unii au subliniat că testul Turing a „eșuat” deoarece dinamica sa nu aderă cu exactitate la stadiul actual al IA17, propunerea lui Turing a localizat perspectivele AI nu doar în îmbunătățirile hardware și software, ci într-un scenariu mai complex. care rezultă din interacțiunile dintre oameni și computere. Plasând oamenii în centrul designului său, testul Turing a oferit un context în care tehnologiile AI ar putea fi concepute în funcție de credibilitatea lor pentru utilizatorii umani.18

Există trei actori în testul Turing, toți dintre care se implică în acte de comunicare: un jucător de computer, un jucător uman și un evaluator sau judecător uman. Capacitatea computerului de a simula modul în care oamenii se comportă într-o conversație este, evident, unul dintre factorii care informează rezultatul testelor. Dar, deoarece actorii umani se angajează activ în comunicări în cadrul testului, comportamentele lor vor fi un alt factor decisiv. Lucruri precum mediul lor, prejudecățile, personajele, genurile și opiniile politice vor avea un rol atât în deciziile interogatorului, cât și în comportamentul interogatorului.
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agenţi umani cu care interogatorul interacționează. Un informatician cu cunoștințe și experiență în AI, de exemplu, va fi într-o poziție diferită de cineva care are o perspectivă limitată asupra subiectului. De asemenea, jucătorii umani care acționează ca parteneri de conversație în test vor avea propriile lor motivații și idei despre cum să participe la test. Unii, de exemplu, ar putea fi fascinați de posibilitatea de a fi schimbati cu un computer și, prin urmare, ar putea fi tentați să creeze ambiguitate cu privire la identitatea lor. Datorită rolului pe care actorii umani îl joacă în testul Turing, toate acestea sunt variabile care pot informa rezultatul acestuia.19

Incertitudinea care derivă din aceasta este adesea indicată a fi unul dintre deficiențele testului.20 Testul pare cu totul logic și justificat, totuși, dacă se vede nu ca o evaluare a existenței mașinilor de gândire, ci ca o măsură a reacțiilor oamenilor. la comunicațiile cu mașini care prezintă un comportament inteligent. Din acest punct de vedere, testul a arătat clar pentru prima dată, cu zeci de ani înainte de apariția comunităților online, a roboților de rețele sociale și a asistenților vocali, că AI nu este doar o chestiune de putere a computerului și tehnici de programare, dar rezidă și - și poate mai ales — în percepțiile și tiparele de interacțiune prin care oamenii se angajează cu computerele.

Formularea articolului lui Turing oferă câteva dovezi suplimentare pentru a susține această interpretare. Deși a refuzat să facă presupuneri cu privire la întrebarea dacă mașinile pot gândi, el nu s-a abținut să speculeze că „la sfârșitul secolului, folosirea cuvintelor și a opiniei generale educate se vor fi modificate atât de mult încât se va putea vorbi de mașini. gândind fără să se aștepte să fie contrazis.”21 Merită să citiți cu atenție formularea acestei afirmații. Acesta nu este un comentariu despre dezvoltarea unor mașini mai funcționale sau mai credibile. Este vorba despre schimbarea culturală. Turing susține că până la sfârșitul secolului al XX-lea oamenii vor avea o înțelegere diferită a problemei AI, astfel încât perspectiva „mașinilor care gândesc” nu va suna la fel de improbabilă ca pe vremea lui Turing. El manifestă interes pentru „folosirea cuvintelor și a opiniei generale educate”, mai degrabă decât pentru posibilitatea de a stabili dacă mașinile „gândesc”.

Privind istoria computerului de pe vremea lui Turing, nu există nicio îndoială că atitudinile culturale despre computere și IA s-au schimbat și destul de considerabil. Lucrarea lui Sherry Turkle, care a studiat relațiile oamenilor cu tehnologia de-a lungul mai multor decenii, oferă dovezi puternice în acest sens. De exemplu, în interviurile realizate la sfârșitul anilor 1970, când ea a întrebat participanții ce părere au despre ideea ca chatbot-uri să furnizeze servicii de psihoterapie, ea a întâmpinat multă rezistență. Majoritatea intervievaților au avut tendința de a admite că mașinile nu pot compensa pierderea sentimentului de empatie dintre psiholog și pacient.22 În cele ce urmează.
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două decenii, totuși, o mare parte din această rezistență s-a dizolvat, participanții la studiile ulterioare ale lui Turkle devenind mai deschiși față de posibilitatea chatbot-urilor de psihoterapie. Discuția despre psihoterapia computerizată a devenit mai puțin moralistă, iar întrebările ei au fost acum luate în considerare în ceea ce privește limitările asupra a ceea ce computerele ar putea face sau fi. Oamenii au fost mai dispuși să admită că, dacă acest lucru era benefic pentru pacient, merita să încerce. După cum a spus Turkle, ei erau „mai predispuși să spună: „Ar fi bine să încerce. Ar putea ajuta. Care este răul?'”23

Predicția lui Turing s-ar putea să nu fi fost îndeplinită – ne putem aștepta încă astăzi să fie contrazis când se vorbește despre mașinile care „gândesc” – totuși el a avut dreptate să realizeze că atitudinile culturale se vor schimba, ca urmare atât a evoluției computerelor, cât și a experiențelor oamenilor cu acestea. tehnologii. Este important, din cauza rolului pe care actorii umani îl joacă în testul Turing, astfel de schimbări pot informa și rezultatele acestuia.

Recalia comparatia cu sedinta spiritualista. Persoanele care se alătură unui „cerc spiritualist” sunt martori la evenimente precum zgomote, mișcări ale mesei și levitarea obiectelor. Rezultatul sedintei depinde de interpretarea pe care experții o dau acestor evenimente. Ea va fi informată, după cum a intuit Faraday, nu numai de natura fenomenelor, ci și, și poate mai ales, de perspectiva celor care se ocupă. Atitudinile și credințele lor, chiar și psihologia și percepția lor, vor informa interpretarea lor.24 Testul Turing ne spune că aceeași dinamică modelează interacțiunile dintre computere și oameni. Definind AI în termeni de capacitatea computerului de a trece testul Turing, Turing a inclus oamenii în ecuație, făcând ideile și părtinirile lor, precum și psihologia și caracterul lor, o variabilă crucială în construcția mașinilor „inteligente”.

A AVENIT COMUNICAREA

Istoricul media John Durham Peters a susținut în mod celebru că istoria comunicării poate fi citită ca istoria aspirației de a stabili o conexiune empatică cu ceilalți și teama că aceasta s-ar putea rupe.25 Ca mass-media precum telegraful, telephoné , și difuzarea au fost introduse, ei au trezit toți speranțe că ar putea facilita astfel de conexiuni și, în același timp, temeri că mediația electronică pe care o oferă ne-ar crește înstrăinarea de semenii noștri. Este ușor de văzut cum acest lucru se aplică și tehnologiilor digitale în prezent. În istoria sa relativ scurtă, internetul a aprins speranțe și temeri puternice: gândiți-vă, de exemplu, la întrebarea dacă rețelele sociale facilitează crearea de noi forme de comunicare sau îi fac pe oameni mai singuri decât oricând.26
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Dar informatica nu a fost întotdeauna văzută în relație cu comunicarea. În 1950, când Turing și-a publicat articolul, comunicarea mediată de computer nu se unise încă într-un domeniu semnificativ de investigație. Calculatoarele au fost discutate în principal ca instrumente de calcul, iar formele disponibile de interacțiuni între utilizatorii umani și computere erau minime.27 Imaginarea comunicării dintre oameni și computere în 1950, când Turing și-a scris articolul, a necesitat un salt vizionar – poate chiar mai mare decât cel necesar. să ia în considerare posibilitatea „inteligenței mașinilor”.28 Însăși ideea de utilizator, înțeleasă ca un individ având acces la resurse de calcul partajate, nu a fost pe deplin conceptualizată înainte de dezvoltarea sistemelor de partajare a timpului și a rețelelor de calculatoare din anii 1960 și Anii 1970 au făcut computerele disponibile accesului individual, inițial în cadrul micilor comunități de cercetători și informaticieni și apoi pentru un public din ce în ce mai larg.29 În consecință, testul Turing este de obicei discutat ca o problemă legată de definiția inteligenței. O modalitate alternativă de a-l privi, totuși, este să-l consideri ca un experiment în comunicațiile dintre oameni și computere. Recent, oamenii de știință au început să propună o astfel de abordare. Expertul în etica inteligenței artificiale David Gunkel, de exemplu, subliniază că „Eseul lui Turing situează comunicarea – și o formă particulară de interacțiune socială înșelătoare – ca factor decisiv” și, prin urmare, ar trebui considerat o contribuție la comunicarea mediată de computer avant la lettre.30 În mod similar, într-o carte atentă scrisă după experiența sa ca participant la Premiul Loebner – un concurs contemporan, discutat pe larg în capitolul 5, în care programele de calculator se angajează într-o versiune a testului Turing – Brian Christian subliniază acest aspect, notând că „testul Turing este, în fond, despre actul comunicării.”31

Deoarece proiectarea testului s-a bazat pe interacțiunile dintre oameni și computere, Turing a simțit nevoia să includă detalii precise despre modul în care ar fi intrat în comunicare. Pentru a asigura validitatea testului, interogatorul trebuia să comunice atât cu jucătorii umani, cât și cu computerul, fără a primi indicii despre identitatea lor, în afară de conținutul mesajelor lor. Comunicațiile dintre oameni și computere din test au fost astfel menite să fie anonime și lipsite de corp.32 În absența afișărilor video și chiar a dispozitivelor de intrare, cum ar fi tastatura electronică, Turing și-a imaginat că răspunsurile la intrările judecătorului „ar trebui scrise, sau mai bine zis, dactilografiată”, aranjamentul ideal fiind „să existe un teleimprimator care comunică între cele două camere”.33 Având în vedere modul în care, după cum au arătat istoricii mass-media, transmisia telegrafiei și mașina de scris au mecanizat cuvântul scris, făcându-l independent de autorul său, Soluția lui Turing arată un simț acut al rolului mass-media
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în comunicare.34 Medierea tehnologică a testului aspiră să facă computerul și actorii umani să participe la experiment ca conținut pur sau să folosească un termen familiar teoriei comunicării, ca informație pură.35

Înainte de „Computing Machinery and Intelligence”, într-un raport nepublicat scris în 1947, Turing fantezise despre ideea de a crea un alt tip de mașină, capabilă să imite oamenii în întregime. Această creatură asemănătoare lui Frankenstein era un cyborg alcătuit dintr-o combinație de medii de comunicare: „O modalitate de a ne stabili sarcina de a construi o „mașină de gândire” ar fi să luăm un om ca întreg și să încercăm să înlocuim toate părțile lui. prin utilaje. El ar include camere de televiziune, microfoane, difuzoare, roți și „servo-mecanisme de manipulare”, precum și un fel de „creier electronic”. Aceasta ar fi, desigur, o întreprindere extraordinară.”36 Este tentant să citim acest text, în pofida tonului său ironic, pe linia aforismului lui Marshall McLuhan conform căreia mass-media sunt „prelungiri ale omului” – cu alte cuvinte, că mass-media. oferă proxy tehnologici prin care abilitățile, simțurile și acțiunile umane sunt reproduse mecanic.37 Deși nota lui Turing a fost depusă în 1947, prin urmare cu aproape două decenii înainte de publicarea lucrării, acum clasice, a lui McLuhan, viziunea lui Turing făcea parte dintr-o tradiție imaginativă mai lungă a cyborgului. ca niște creaturi care au prezentat mass-media precum fotografia, cinematograful și fonograful ca înlocuitori pentru organele și simțurile umane.38 În ceea ce privește istoria IA, imaginația lui Turing despre o mașină care ia „omul ca întreg și încearcă să înlocuiască toate părțile lui prin mașini” indică rolul mass-media în stabilirea condițiilor pentru IA de succes.39 Într-adevăr, istoria Sistemelor dezvoltate în următoarele decenii demonstrează impactul mijloacelor de comunicare. Folosirea diferitelor tehnologii și interfețe pentru a trimite mesaje informează, dacă nu direct, natura computațională a acestor programe, rezultatul comunicării lor, adică modul în care au impact asupra utilizatorilor umani. Un bot de socializare pe Twitter, de exemplu, poate fi programat să răspundă cu același script ca un bot într-o cameră de chat, dar natura și efectele comunicării vor fi contextualizate și înțelese diferit. În mod similar, în ceea ce privește vocea, natura comunicării va fi diferită dacă asistenții vocali AI sunt aplicați în medii domestice, cum ar fi Alexa, încorporați în smartphone-uri și alte dispozitive mobile, cum ar fi Siri, sau angajați pentru a conduce conversații telefonice, ca în serviciile automate pentru clienți. sau proiectul Google Duplex în derulare.40

Testul Turing, în acest sens, este o reamintire a faptului că interacțiunile dintre oameni și sistemele AI nu pot fi înțelese fără a lua în considerare circumstanțele medierii. Oamenii, ca participanți la o interacțiune comunicativă, ar trebui priviți mai degrabă ca o variabilă esențială decât șterse
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prin abordări care se concentrează numai pe performanța tehnologiilor de calcul. Mediul și interfața, de asemenea, contribuie la forma rezultatelor și a implicațiilor fiecărei interacțiuni. Propunerea lui Turing a fost, în acest sens, poate mai mult „Joc de comunicare” decât „Joc de imitație”.

PLAYINC CU TURING

Fie că este vorba despre comunicare sau imitație, testul Turing a fost în primul rând un joc. Turing nu s-a referit niciodată la el drept „test”; această formulare a preluat controlul după moartea sa.41 Faptul că ceea ce noi numim acum testul Turing a fost descris de creatorul său nu ca un test, ci ca un joc, uneori este respins ca irelevant.42 În spatele unor astfel de concedieri se află o prejudecată larg răspândită care consideră o atitudine jucăușă. activitățile să fie distincte de investigațiile și experimentele științifice serioase. În istoria societăților umane, totuși, jocul a fost adesea un motor al inovației și al schimbării.43 În ceea ce privește istoria IA, jocurile au fost și ele un vehicul puternic al inovației: pionierii AI, cum ar fi părintele teoriei informației, Claude. Shannon, sau creatorul primului chatbot, Joseph Weizenbaum, s-a bazat pe jocuri pentru a explora și a interoga semnificațiile și potențialele computerului.44 Turing însuși a început să programeze șah, scriind propriul program de șah pe hârtie în absența unui computer. capabil să-l ruleze.45

În 1965, matematicianul rus Alexander Kronrod a fost rugat să explice de ce folosea timp prețios de calculator la Institutul Sovietic de Fizică Teoretică și Experimentală pentru a se angaja într-o activitate jucăușă, banală, cum ar fi șahul prin corespondență. El a răspuns că șahul era „drosophila inteligenței artificiale”.46 Referirea a fost la Drosophila melanogaster, cunoscută mai frecvent sub numele de musca fructelor, care a fost adoptată ca „organisme model” de către cercetătorii în genetică pentru investigații experimentale în domeniul lor47. Kronrod a sugerat că șahul le-a oferit cercetătorilor AI un sistem relativ simplu al cărui studiu ar putea ajuta la explorarea unor întrebări mai mari despre natura inteligenței și a mașinilor. Faptul că în cele din urmă și-a pierdut conducerea Institutului din cauza plângerilor că, în ciuda faptului că a irosit resurse de computer costisitoare, răspunsul său era destinat să se transforme într-o axiomă pentru disciplina AI. Pionierii săi și-au îndreptat atenția către șah, deoarece regulile sale simple făceau ușoară simularea pe computer, în timp ce strategiile și tacticile complexe implicate au făcut din acesta o provocare semnificativă pentru mașinile de calcul.48 Cu toate acestea, așa cum au arătat istoricii științei, astfel de alegeri nu sunt niciodată decizii neutre: de exemplu, adoptarea Drosophila ca organism experimental de alegere pentru genetică
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cercetarea a însemnat că anumite agende de cercetare au devenit dominante, în timp ce altele au fost neglijate.49 În mod similar, alegerea șahului ca „drosophila a AI” a avut consecințe mai largi pentru domeniul AI, modelând abordări ale programării și înțelegeri specifice a ceea ce este inteligența. Progresele în șahul pe computer au privilegiat asocierea dintre inteligență și gândirea rațională, susținută de faptul că șahul a fost privit de secole ca dovadă a celei mai înalte inteligențe umane.50

Ne întrebăm dacă nu numai șahul, ci și jocurile în general sunt Drosophila IA comunicativă. De-a lungul istoriei AI, jocurile au permis cercetătorilor și dezvoltatorilor să-și imagineze și să testeze în mod activ interacțiunile și comunicarea cu mașinile.51 În timp ce un joc poate fi descris în termeni abstracti ca un set de reguli care descriu interacțiuni potențiale, în termeni pragmatici, jocurile există doar atunci când sunt puse în aplicare - când jucătorii face alegeri și întreprinde acțiuni sub constrângerile regulilor. Acest lucru este valabil și pentru jocul de imitație: are nevoie de jucători pentru a exista.

Istoricii informaticii au explorat relația de doză dintre jocuri și apariția utilizatorului de computer. În anii 1960, când tehnologiile de partajare a timpului și minicalculatoarele au făcut posibil ca mai mulți indivizi să acceseze resurse computerizate încă limitate, jocul a fost una dintre primele forme de interacțiune implementate. În plus, jocurile au fost printre primele programe codificate de primii „hackeri” care au experimentat noile mașini.52 După cum spune informaticianul Brenda Laurel, primii programatori de jocuri digitale și-au dat seama că potențialul computerului nu se afla sau nu numai „în capacitatea sa. să efectueze calcule dar în capacitatea sa de a reprezenta acțiuni la care oamenii ar putea participa.”53

Faptul că computerele joacă jocuri are consecințe semnificative pentru interacțiunea om-calculator. Înseamnă crearea unui sistem controlat în care să aibă loc interacțiuni între utilizatorii umani și utilizatorii computerului, identificând computerul ca jucător potențial și, prin urmare, ca agent în designul jocului. Acest lucru poate duce la prăbușirea distincțiilor dintre jucătorii umani și cei de pe computer. În cadrul sistemului reglementat al unui joc, de fapt, un jucător este definit de caracteristicile și acțiunile care sunt relevante pentru joc. Rezultă că, dacă se compară un computer și un agent uman care joacă jocul, ei nu se pot distinge în principiu în limitele acelui joc. Acest lucru i-a determinat pe oamenii de știință din studiile jocurilor să susțină că diviziunea dintre oameni și mașini în jocurile digitale este „complet artificială”, deoarece „atât mașina, cât și operatorul lucrează împreună într-o relație cibernetică pentru a efectua diferitele acțiuni ale jocului video”. 54

În diferite momente din istoria AI, jocurile au încurajat cercetătorii și practicienii să imagineze noi căi de interacțiuni între oameni și mașini. S-au făcut, de exemplu, șah și alte jocuri de masă
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posibilă o confruntare între oameni și computere care a necesitat luarea pe rând, un element fundamental în comunicarea umană și unul care a fost implementat pe scară largă în proiectarea interfeței. În mod similar, jocurile digitale au deschis calea pentru experimentarea cu sisteme interactive mai complexe care implică utilizarea altor simțuri umane, cum ar fi vederea și atingerea.55 Testul Turing, în acest context, a imaginat apariția a ceea ce Paul Dourish calis „calculatul social”. o serie de sisteme pentru interacțiunile om-mașină prin care înțelegerile lumilor sociale sunt încorporate în sisteme informatice interactive.56

La începutul erei computerelor, testul Turing a făcut imaginabile idei precum „calculatoarele care gândesc” sau „inteligența mașinii” în termenii unei situații simple de joc în care mașinile rivalizează cu adversarii umani. În cartea sa vizionară God & Golem, Inc. (1964), fondatorul ciberneticii, Norbert Wiener, a prezis că faptul că mașinile de învățare și-ar putea depăși creatorii în jocuri și concursuri din lumea reală va ridica serioase dileme practice și morale pentru dezvoltarea IA. Dar testul Turing nu a propus doar posibilitatea ca o mașină să poată învinge un om la un fair play. În plus, câștigând Jocul Imitației – sau trecând testul Turing, așa cum s-ar spune astăzi – mașinile ar avansa cu un pas mai departe în impertinența lor față de creatorii lor. Ei ar păcăli oamenii, făcându-ne să credem că mașinile nu sunt diferite de noi.

O JOACĂ DE ÎNșelare

În Monkey Shines, un film din 1988 regizat de George Romero, un bărbat pe nume Allan este paralizat de sub gât într-un accident. Pentru a face față situației, i se oferă o maimuță dresată care să-i ajute în viața de zi cu zi. Maimuța prezintă în curând o inteligență uluitoare și dezvoltă o relație afectuoasă cu protagonistul. Cu toate acestea, în concordanță cu abordarea lui Romero în ceea ce privește crearea de film – el este bine cunoscut pentru saga Night of the Living Dead – povestea se transformă curând într-un coșmar. Armonia inițială dintre animal și stăpânul său este ruptă pe măsură ce maimuța merge într-o sifonie de ucidere, eliminând unii dintre cei dragi lui Allan. Deși incapabil să se miște, Allan stili are un avantaj față de maimuță: oamenii știu să mintă, o abilitate de care animalelor - ne spune hlm - le lipsește. Allan reușește să oprească maimuța pretinzând că își caută afecțiunea, atrăgând-o astfel într-o capcană mortală.

Ideea că capacitatea de a minți este o caracteristică de dehning a oamenilor rezonează în testul Turing. Dacă testul este un exercițiu de interacțiune om-calculator, această interacțiune este modelată de șmecherie: computerul va „câștiga” jocul dacă este capabil să înșele interogatorul uman. Testul Turing poate
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să fie privit, în acest sens, ca un test de detectare a minciunii în care interogatorul nu poate avea încredere în partenerul ei de conversație, deoarece o mare parte din ceea ce va spune un computer este fals.57 Criticii testului Turing au indicat uneori acest aspect ca fiind unul dintre deficiențele acestuia. , raţionând că abilitatea de a păcăli oamenii nu trebuie pusă ca un test adecvat al inteligenţei.58 Acest lucru, însă, poate fi explicat prin faptul că testul nu măsoară inteligenţa, ci doar capacitatea de a o reproduce. Evaluând IA în termeni de imitație, testul pune problema IA din perspectiva utilizatorului: doar concentrându-se asupra observatorului, până la urmă, se poate stabili eficacitatea unei iluzii.59 Inclusiv minciuna și decepția în Mandatul AI devine astfel echivalent cu definirea inteligenței mașinii în ceea ce privește modul în care este percepută de utilizatorii umani, mai degrabă decât în termeni absoluti. Într-adevăr, în deceniile de după propunerea lui Turing, pe măsură ce programele de calculator au fost dezvoltate pentru a-și încerca norocul cu testul, decepția a devenit o strategie comună: a devenit evident programelor că existau strategii pentru a exploata falibilitatea judecătorilor, de exemplu prin folosirea prostiei sau a ironiei. pentru a devia întrebările care ar putea expune programul de calculator.60

Istoricul mass-media Bernard Geoghegan a sugerat că relația testului Turing cu decepția reflectă moștenirea cercetării criptologice la începutul IA.61 În timpul celui de-al Doilea Război Mondial, Turing a contribuit la eforturile desfășurate la Bletchley Park pentru a decripta mesajele cifrate folosite de germani și aliații lor pentru comunica în secret. Acest lucru a implicat, de asemenea, crearea de mașini electronice, inclusiv unul dintre primele computere digitale, pentru a spori viteza și raza de acoperire a activității criptografice. în testul Turing. Criptografii au trebuit să deducă funcționarea mașinilor criptografice create de naziști, cum ar fi faimoasa Enigma, pur și simplu prin analiza mesajului cifrat; într-un mod similar, notează Whitby, judecătorul din testul Turing trebuie să descopere identitatea umană sau mecanică a partenerului ei de conversație doar prin evaluarea „ieșirii” conversației.63

Comparând dinamica testului Turing cu cea a războiului, interpretarea criptografică are în vedere o tensiune internă între mașină și om. De fapt, perspectiva ca mașinile să treacă testul Turing a trezit adesea temeri cu privire la o apocalipsă a roboților și la pierderea primatului pentru oameni.64 Cu toate acestea, există și un element de joacă în decepția administrată de computere în testul Turing. După cum am arătat, insistența lui Turing că trebuie privit ca un joc a susținut pertinența sa pentru lumea jocului. Așa cum a propus istoricul cultural Johan Huizinga, jocul este „o activitate liberă care se află destul de conștient în afara vieții „obișnuite” ca fiind „nu seriale”, dar în același timp absorbind intens jucătorul și
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cu totul.”65 Astfel, în testul Turing, poziția înșelătoare a computerului este inofensivă tocmai pentru că este purtată într-un cadru atât de jucăuș, cu complicitatea jucătorilor umani care urmează regulile jocului și participă de bunăvoie la el.66

Turing și-a prezentat testul ca pe o adaptare a unui „joc de imitație” original în care interogatorul trebuia să determine cine era bărbatul și cine era femeia, punând în prim-plan performanța de gen mai degrabă decât inteligența mașinii.67 Testul, în acest sens, poate să fie văzute ca parte a unei genealogii mai lungi de jocuri care, înainte de apariția computerelor electronice, au introdus decepția jucăușă ca parte a designului lor.68 Oracolul Doamnei, de exemplu, era o distracție populară victoriană pentru serile sociale. Jocul a oferit o serie de răspunsuri prescrise pe care jucătorii le-au selectat aleatoriu pentru a răspunde la întrebările puse de alți jucători. Întrucât răspunsurile amuzante și surprinzătoare au fost create din întâmplare, jocul a stimulat tentația prea umană a jucătorilor de a atribui înțeles întâmplării.69 „Plăcile de spirit” care reproduc dinamica ședințelor spiritualiste în scopul divertismentului sunt un alt exemplu. 70 Comercializate în mod explicit ca distracții de către o serie de companii de jocuri de societate încă de la sfârșitul secolului al XIX-lea, ele transformă comunicarea spirituală într-un joc de masă popular care valorifică fascinația jucătorilor pentru supranatural și dorința lor – conștientă sau inconștientă – de a face ședința de spiritism.” munca.”71 Aceeași dinamică caracterizează spectacolele de magie scenică, în care apetitul publicului pentru spectacol este adesea atribuit plăcerilor de a se încadra cu trucurile prestidigitatorului, a descoperirii că cineva este susceptibil de decepție și admiraţie pentru interpretul care execută sleights of hand.72

Ceea ce au aceste activități în comun cu testul Turing este că distrează participanții prin exploatarea puterii de sugestie și înșelăciune. O conotație negativă este de obicei atribuită decepției, dar integrarea acesteia în activități ludice este un memento că oamenii caută în mod activ situații în care ar putea fi înșelați, în urma unei dorințe sau nevoi pe care mulți oameni o împărtășesc. Decepția în astfel de contexte este domesticită, făcută parte integrantă dintr-o experiență distractivă care reține puțin sau nimic din amenințările pe care alte practici înșelătoare le aduc cu ei.73 Înșelăciunea jucăușă, în acest sens, postulează testul Turing ca un joc aparent inofensiv care îi ajută pe oameni să experimentați cu simțul, care caracterizează multe forme de interacțiuni între oameni și mașini, că un anumit grad de decepție este inofensiv și chiar funcțional pentru împlinirea unei interacțiuni productive. Alexa și Siri sunt exemple perfecte ale modului în care funcționează acest lucru în practică: utilizarea vocilor și numelor umane cu care acești „asistenți” pot fi chemați și consistența comportamentelor lor stimulează utilizatorii să le atribuie o anumită personalitate. Acest lucru, la rândul său, ajută utilizatorii să introducă

TESTUL TURING [29]

aceste Sisteme mai ușor în viața lor de zi cu zi și în spațiile domestice, făcându-le mai puțin amenințătoare și mai familiare. Asistenții vocali funcționează cel mai eficient atunci când o formă de decepție jucăușă și voluntară este încorporată în interacțiune.

Pentru a reveni la ideea subliniată în Monkey Shines, lectura mea a testului Turing indică o altă sugestie: ceea ce îi caracterizează pe oameni nu este atât capacitatea lor de a înșela, cât și capacitatea și dorința lor de a cădea în decepție. Prezentând posibilitatea ca oamenii să fie înșelați de computere într-un context liniștitor și jucăuș, testul Turing invită la reflecție asupra implicațiilor creării de sisteme AI care se bazează pe utilizatorii care se încadrează de bunăvoie în iluzie. În loc să prezinte decepția ca o circumstanță excepțională, jocul de imitație a imaginat un viitor în care decepția banală este oferită ca o oportunitate de a dezvolta interacțiuni satisfăcătoare cu tehnologiile AI. Studiile de interacțiune socială în psihologie, la urma urmei, au arătat că auto-înșelarea aduce o serie de beneficii și avantaje sociale.74 O concluzie similară este evocată și oglindită de cercetările contemporane în designul interacțiunii care indică avantajele de a avea utilizatori și consumatori să atribuie agenție. și personalitate la gadgeturi și roboți.75 Aceste explorări ne spun că, cultivând o impresie de inteligență și agenție în sistemele de calcul, dezvoltatorii ar putea fi capabili să îmbunătățească experiența utilizatorilor cu aceste tehnologii.

Cititorul atent ar fi putut înțelege consecințele tulburătoare ale acestui efort aparent benign. McLuhan, unul dintre cei mai influenți teoreticieni ai mass-media și a comunicării, a folosit mitul grec al lui Narcis ca o pildă pentru relația noastră cu tehnologia. Narcis a fost un tânăr și frumos vânător care, după ce și-a văzut propria imagine reflectată într-un bazin, s-a îndrăgostit de el însuși. Incapabil să se îndepărteze de această priveliște fascinantă, s-a uitat la reflex până a murit. La fel ca Narcissus, oamenii se uită la gadgeturile tehnologiei moderne, căzând într-o stare de narcoză care îi face incapabili să înțeleagă modul în care media le schimbă.76 Identificarea decepției ludice ca paradigmă pentru conceptualizarea și construirea tehnologiilor AI trezește întrebarea dacă o astfel de sentimentul de narcoză este, de asemenea, implicat în reacțiile noastre la tehnologiile bazate pe inteligență artificială. La fel ca Narcis, îi considerăm inofensivi, chiar jucăuși, în timp ce schimbă dinamica și înțelegerea vieții sociale în moduri pe care le putem controla doar parțial.

MENSUL UNUI TEST

S-au scris atât de multe despre testul Turing încât s-ar putea crede că nu mai este nimic de adăugat. În ultimii ani, mulți au susținut că
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Testul Turing nu reflectă funcționarea sistemelor AI moderne. Acest lucru este adevărat dacă testul este văzut ca un banc de testare cuprinzător pentru întreaga gamă de aplicații și tehnologii care intră sub eticheta „AI” și dacă nu recunoaștem refuzul lui Turing de a aborda problema dacă există „mașini care gândesc” sau nu. nu. Privind testul Turing dintr-o perspectivă diferită, se găsește totuși că acesta oferă în continuare chei interpretative extrem de utile pentru înțelegerea implicațiilor și impactului multor sisteme AI contemporane.

În acest capitol, Гѵе a folosit testul Turing ca obiectiv teoretic pentru a dezvălui trei probleme cheie despre sistemele AI. În primul rând, este centralitatea perspectivei umane. Cu mult timp înainte ca sistemele AI interactive să intre în mediile domestice și spațiile de lucru, cercetători precum Turing și-au dat seama că măsura în care computerele ar putea fi numite „inteligente” va depinde de modul în care oamenii le-au perceput mai degrabă decât de anumite caracteristici specifice ale mașinilor. Acesta a fost rodul, într-un fel, al unui eșec: imposibilitatea de a ajunge la un acord cu privire la definițiile cuvântului inteligență și de a evalua experiența sau conștiința mașinilor fără a fi „în interiorul” acesteia. Dar această realizare a fost destinată să conducă la progrese extraordinare în domeniul AI. Înțelegând faptul că AI este un fenomen relațional, ceva care apare și în special în interacțiunea dintre oameni și mașini, a stimulat cercetătorii și dezvoltatorii să modeleze comportamentele umane și stările de spirit pentru a concepe sisteme AI interactive mai eficiente.

A doua problemă este rolul comunicării. Imaginat de Turing într-o perioadă în care instrumentele disponibile pentru a interacționa cu computerele erau minime și însăși ideea de utilizator nu a apărut încă ca atare, testul Turing ne ajută, în mod paradoxal, să înțelegem centralitatea comunicării în Sistemele AI contemporane. În literatura informatică, interacțiunea om-calculator și inteligența artificială sunt de obicei tratate ca distincte: una se preocupă de interfețele care permit utilizatorilor să interacționeze cu tehnologiile de calcul, cealaltă de crearea de mașini și de sarcini de finalizare a programelor care sunt considerate inteligente, cum ar fi traducerea unui text într-o altă limbă sau angajarea într-o conversație cu utilizatori umani. Cu toate acestea, testul Turing, așa cum am arătat în acest capitol, oferă un punct de plecare comun pentru aceste două domenii. Indiferent dacă aceasta a fost sau nu printre intențiile inițiale ale lui Turing, testul oferă o oportunitate de a lua în considerare AI și în ceea ce privește modul în care comunicarea dintre oameni și computere este încorporată în sistem. Este o reamintire a faptului că sistemele AI nu sunt doar mașini de calcul, ci și medii care permit și reglementează forme specifice de comunicare între utilizatori și computere.77

TESTUL DE LA TURINO [31]

A treia problemă este legată de preocuparea centrală a acestei cărți: relația dintre AI și deception. Faptul că testul Turing a postulat o situație în care un interogator uman era predispus la decepție de către computer arată că problema decepției a stârnit reflecții în câmpul AI deja în anii gestaționali. Totuși, situația de joc în care este încadrat testul stimulează să se ia în considerare caracterul ludic și aparent inofensiv al acestei decepții. După cum sa discutat în introducere, la urma urmei, tehnologiile și practicile media, inclusiv magia scenă, pictura trompe l'oeil, cinematograful și înregistrarea sunetului, printre multe altele, sunt eficiente și în măsura în care deschid oportunități de implicare jucăușă și voluntară. cu efectele decepției.78 Decepția ludică a testului Turing, în acest sens, confirmă și mai mult afirmația mea că AI ar trebui plasată în traiectoria mai lungă a media înșelătoare care încorporează decepția banală în funcționarea lor.
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CARTA 2

Cum să risipiți magia

Calculatoare, interfețe și problema observatorului

În vara anului 1956, un grup de matematicieni, ingineri informatici, fizicieni și psihologi s-au întâlnit pentru un atelier de brainstorming la Dartmouth, SUA, pentru a discuta despre un nou domeniu de cercetare pe care l-au numit în mod ambițios „inteligență artificială”. Deși nu s-a atins nicio descoperire specială la conferință, acolo unii dintre oamenii de știință care au modelat noul domeniu în anii următori - precum Marvin Minsky, John McCarthy, Alien Newell, Herbert Simon și Claude Shannon - au definit obiectivele care ar conduce eforturile de inteligență artificială.1 Toți au împărtășit convingerea că inteligența umană se bazează pe un raționament oficial a cărui dinamică ar putea fi reprodusă cu succes de computerele digitale. Dacă i se pune întrebarea pe care Turing a respins-o cu prudență cu câțiva ani mai devreme: „Pot mașinile să gândească?” — cei mai mulți dintre ei ar fi răspuns probabil: Da, și în curând vom avea suficiente dovezi pentru a-i convinge chiar și pe cei mai sceptici.

Mai mult de șaizeci de ani mai târziu, dovezile care susțin acest punct de vedere sunt încă incerte și ambivalente. Cu toate acestea, în ciuda optimismului lor excesiv, pionierii AI de la Dartmouth au stabilit o bază pentru o dezvoltare excepțională în domeniul informaticii, care continuă să exercite o influență și astăzi. Între sfârșitul anilor 1950 și începutul anilor 1970, ei au facilitat o serie de realizări practice care au ridicat în mod dramatic așteptările cu privire la perspectivele câmpului. A fost o perioadă de entuziasm excepțional, descrisă de istorici drept „epoca de aur” a IA.2 Tehnologii înfloritoare precum procesarea limbajului, traducerea automată, rezolvarea automată a problemelor, chatbot-urile și jocurile pe calculator au apărut toate în acei ani.
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În acest capitol, mă uit la această cercetare timpurie AI pentru a dezvălui o moștenire mai puțin evidentă a acestei perioade de pionierat. Povestesc povestea despre modul în care membrii comunității AI și-au dat seama că observatorii și utilizatorii ar putea fi înșelați să atribuie inteligență computerelor și cum această problemă a devenit strâns legată de construirea de sisteme interactive om-calculator care integrau decepția și iluzia în mecanismele lor. La prima vedere, această poveste pare în contradicție cu faptul că mulți dintre cercetătorii care au modelat acest nou domeniu au crezut în posibilitatea creării unei IA „puternice”, adică a unei mașini ipotetice care ar avea capacitatea de a completa sau de a învăța orice intelectual. sarcina pe care o ființă umană ar putea. Cu toate acestea, explorările practice în IA au coincis și cu descoperirea că oamenii, așa cum a anticipat Turing, fac parte din ecuația care definește atât sensul, cât și funcționarea AL.

Pentru a spune această poveste, trebuie să recunoaștem că dezvoltarea IA nu poate fi separată de dezvoltarea sistemelor interactive om-calculator. Mă uit, prin urmare, la istoria AI și a interacțiunii om-calculator în paralel. Încep prin a examina modurile în care cercetătorii AI au recunoscut și reflectat asupra faptului că oamenii atribuie inteligență computerelor pe baza părtinirilor, viziunilor și cunoștințelor oamenilor. Pe măsură ce oamenii de știință dezvoltau și prezentau publicului sistemele lor de calcul sub eticheta AI, ei au remarcat că observatorii erau înclinați să exagereze „inteligența” acestor sisteme. Deoarece computerele timpurii ofereau puține posibilități de interacțiune, aceasta a fost o observație care se referea în principal la modurile în care tehnologiile AI erau prezentate și percepute de către public. Dezvoltarea tehnologiilor care au creat noi forme și modalități de interacțiune între oameni și computere a fost, în acest sens, un punct de cotitură. Așadar, trec la discutarea modalităților în care au fost concepute și implementate sistemele interactive timpurii. Bazându-mă pe literatura în informatică și pe teoriile din studiile media care descriu interfețele computerelor ca fiind dispozitive iluzorii, arăt că aceste sisteme au realizat în practică ceea ce testul Turing a anticipat în teorie: că IA există doar în măsura în care este percepută ca atare de către om. utilizatorii. Când progresele în hardware și software au făcut posibile noi forme de comunicare între oameni și computere, aceste forme au modelat direcții practice și teoretice în domeniul AI și au făcut din calcul un capitol cheie în povestea descendenței media înșelătoare.

TEHNOLOGIE DE CONSTRUIRE, CREAȚI MITURI

Vizionarea imaginilor în mișcare pe ecranele laptopurilor și dispozitivelor noastre mobile este astăzi o experiență banală de zi cu zi. Cu toate acestea, cineva poate imagina minunea
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a spectatorilor la sfârşitul secolului al XIX-lea când au văzut pentru prima dată imagini preluate din realitate animate pe ecranul cinematografic. Pentru mulți observatori timpurii, filmul a apărut ca un tărâm al umbrelor, o ispravă de magie asemănătoare cu trucul unui prestidigitător sau chiar ca o ședință spirituală. Potrivit istoricilor de film, unul dintre motivele pentru care cinematograful timpuriu a fost o experiență atât de magică a fost faptul că proiectorul era ascuns de vederea spectatorilor. Nevăzând sursa iluziei, publicul a fost stimulat să-și lase imaginația să facă treaba.3

La rădăcinile asocierii tehnologiei cu magia se află, de fapt, opacitatea acesteia. Uimirea noastră față de inovațiile tehnologice derivă adesea din eșecul nostru de a înțelege mijloacele tehnice prin care funcționează, la fel cum uimirea noastră față de isprava unui magician depinde în parte de incapacitatea noastră de a înțelege trucul.4 Din acest punct de vedere, computerele sunt una dintre cele mai încântătoare tehnologii pe care oamenii le-au creat vreodată. Opacitatea mediilor digitale, de fapt, nu poate fi redusă la abilitățile tehnice și cunoștințele utilizatorilor: este încorporată în funcționarea tehnologiilor de calcul. Limbajele de programare oferă comenzi inteligibile pentru oamenii de știință, permițându-le să scrie cod care execută funcții complexe. Astfel de comenzi corespund însă operațiunilor reale ale mașinii numai după ce au fost traduse de mai multe ori, în limbaje de programare de nivel inferior și, în final, în codul mașinii, care este setul de instrucțiuni în numere binare executate de computer. Codul mașinii este un nivel atât de scăzut de abstractizare încât este în mare parte de neînțeles pentru programator. Astfel, chiar și dezvoltatorii nu sunt în măsură să înțeleagă stratificările software-ului și codului care corespund funcționării efective a mașinii. Calculatoarele sunt, în acest sens, cutia neagră supremă: o tehnologie a cărei funcționare internă este opaca chiar și pentru cei mai experți utilizatori.5

Prin urmare, nu este surprinzător faptul că inteligența artificială și, în general, computerele electronice au stimulat de la începuturi o multitudine de fantezii și mituri. Dificultatea de a afla cum funcționează computerele, combinată cu rapoarte exagerate despre realizările lor, au declanșat apariția unui imaginar vibrant în jurul noilor mașini. După cum a demonstrat istoricul informaticii C. Dianne Martin, pe baza unui corp de sociologică bazată pe sondaje! dovezile și analiza conținutului ziarelor, un segment mare al opiniei publice în anii 1950 și începutul anilor 1960 a ajuns să vadă computerele ca „creiere inteligente, mai inteligente decât oamenii, nelimitate, rapide, misterioase și înfricoșătoare.”6 Apariția IA a fost profund împletită. odată cu apariția unui mit tehnologic centrat în jurul posibilității de a crea mașini de gândire. Acest lucru nu a trecut neobservat de oamenii de știință care au construit câmpul AI în deceniile de după cel de-al Doilea Război Mondial. Pe măsură ce au fost date realizările timpurii

PROBLEMA OBSERVATORULUI [35]

acoperire în presă și discutat în forumuri publice, cercetătorii au aflat că, dacă un sistem informatic era prezentat ca fiind inteligent, oamenii aveau o tendință puternică de a-l percepe ca atare. În ciuda faptului că sistemele dezvoltate de pionierii disciplinei erau încă de o complexitate limitată și o utilizare practică limitată, ele li s-au părut pentru mulți a fi demonstrații puternice că oamenii de știință au avansat computerele spre a fi capabile să-și exercite facultăți asemănătoare omului, cum ar fi intuiția, percepția și chiar emoția. .

Potrivit lui Martin, jurnaliştii de masă au modelat imaginaţia publică a computerelor timpurii prin metafore înşelătoare şi exagerări tehnice. Dimpotrivă, oamenii de știință în domeniul informaticii au încercat să „desființeze miturile în curs de dezvoltare despre noile dispozitive.”7 Cu toate acestea, răspunsul multor cercetători AI a fost mai ambivalent decât recunoaște Martin, ea însăși un informatician. Pe măsură ce cercetătorii adoptau o nouă terminologie pentru a descrie funcțiile și metodele relevante pentru sistemele AI, ei selectau adesea metafore și concepte care sugerau o asemănare de doză cu inteligența umană.8 Una dintre cărțile care au cartografiat teritoriul, de exemplu, a definit cu prudență IA. în 1968 ca „știința de a face mașini să facă lucruri care ar necesita inteligență dacă ar fi făcute de oameni”, restabilind implicit distincția dintre mecanic și om.9 Cu toate acestea, colaboratorii acestei cărți au descris procesele de calcul în termeni de concepte strâns asociate cu inteligența umană.10 Cuvinte precum „gândire”, „memorie” și chiar „simțire” mascau faptul că programatorii urmăreau cel mai adesea să creeze Sisteme care păreau doar inteligente. Utilizarea analogiilor este larg răspândită în discursul științific și a devenit deosebit de proeminentă în abordarea de cercetare transdisciplinară adoptată de cercetătorii AI, în care informatica sa intersectat cu domenii precum psihologia, biologia și matematica, printre altele.11

Deși primele sisteme AI au generat rezultate promițătoare, diferențele față de modul în care gândesc oamenii au fost evidente. De exemplu, elemente precum intuiția sau conștiința marginală, care joacă roluri importante în inteligența umană, erau complet absente din modelele formate ale computerelor.12 Totuși, că metaforele înșelătoare au fost folosite a depins doar parțial de tendința de exagerare care a caracterizat comunicarea multe cercetări timpurii în IA: s-a datorat și ipotezelor teoretice care au stat la baza AI. Teoria de bază în faza inițială a inteligenței artificiale a fost că gândirea rațională era o formă de calcul și că procesele mentale nu puteau fi descrise doar simbolic, ci erau simbolice.13 Această ipoteză a venit împreună cu credința că computerele ar putea replica funcționarea. a minții umane.

Unul dintre lucrurile care au făcut această ipoteză convingătoare a fost faptul că nu numai tehnologiile informatice, ci și tot ceea ce are de făcut
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cu inteligența este prin definiție opac. Dacă este dificil să facem o punte între ceea ce realizează software-ul și ceea ce se întâmplă la nivelul circuitelor computerizate, este și mai dificil să ne imaginăm cum gândurile și emoțiile noastre corespund stărilor fizice specifice din interiorul creierului și corpului uman. Știm, de fapt, foarte puține despre modul în care funcționează creierul.14 În spațiul dintre cele două părți ale acestei duble lipse de înțelegere s-a deschis posibilitatea de a imagina computerele ca mașini de gândire chiar și atunci când erau disponibile puține dovezi care să sugereze o strânsă asemănare între computere și creierul uman. Opacitatea atât a computerelor, cât și a creierului uman a însemnat că afirmația „calculatoarele sunt mașini de gândire” era imposibil de dovedit, dar și imposibil de respins. În consecință, visul de a construi un creier electronic a condus eforturile multor cercetători AI în timpul unei etape de extindere extraordinară a tehnologiilor de calcul.

Unii cercetători au văzut entuziasmul excesiv în jurul sistemelor AI timpurii ca o formă de decepție. Omul de știință Douglas Hofstadter a reflectat asupra unei astfel de dinamici subliniind că „pentru mine, în calitate de persoană în curs de dezvoltare [AI], era de la sine înțeles că nu voiam să mă implic în această șmecherie. Era evident: nu vreau să fiu implicat în a transmite un comportament al unui program de lux pentru inteligență, când știu că nu are nimic de-a face cu inteligența.”15 Alți cercetători AI au fost mai ambivalenți. Majoritatea oamenilor de știință și-au exprimat de obicei prudență în publicațiile academice, dar în platformele destinate publicului non-universitar și în interviurile cu presa au fost mult mai puțin conservatori.16 Marvin Minsky de la Massachusetts Institute of Technology (MIT), de exemplu, a sugerat într-o publicație care vizează publicul larg că, odată create programe cu capacitate de auto-îmbunătățire, un proces evolutiv rapid ar duce la observarea „toate fenomenele asociate cu termenii „conștiință”, „intuiție” și „inteligență” în sine.”17

Nimeni din domeniu nu putea ignora cât de important era să navigheze în așteptările, percepțiile și fanteziile publicului care înconjura IA.18 Tendința de a supraevalua realizările reale și potențiale ale IA a fost alimentată de nevoia de a promite rezultate interesante și practice. aplicații care ar atrage finanțare și atenție pentru cercetare. Raportând despre experiența sa de pionier al inteligenței artificiale în anii 1950, Arthur L. Samuel și-a amintit: „Am construi un computer foarte mic și am încerca să facem ceva spectaculos cu el, care să atragă atenția, astfel încât să obținem mai mulți bani.”19 mitul mașinii de gândire a funcționat, de asemenea, ca un obiectiv unificator pentru cercetătorii din domeniul IA în curs de dezvoltare. După cum au arătat istoricii tehnologiei, discursul orientat spre viitor în mediile tehno-științifice contribuie la o schimbare a accentului de la starea prezentă a cercetării și către o perspectivă imaginată când tehnologia va fi implementată cu succes.

PROBLEMA OBSERVATORULUI [37]

Această schimbare facilitează crearea unei comunități de cercetători, introducând un obiectiv comun sau un punct final care informează și organizează munca oamenilor de știință, tehnologilor și inginerilor implicați într-o astfel de comunitate.20

Pe măsură ce sistemele practice au fost implementate cu rezultate mixte, a devenit clar că cursa pentru AI se desfășura nu numai în domeniul tehnologiei, ci și în domeniul imaginației. Ideea unor mașini de gândire care ar rivaliza cu inteligența umană a aprins fascinația publicului, stimulând apariția viselor, precum și a coșmarurilor despre viitorul AI. Aceste sentimente reverberează astăzi în viziuni despre singularitate sau viitoarea apocalipsă a roboților.21 Când scriitorul de science-fiction Arthur C. Clarke, care a dezvoltat în colaborare cu Stanley Kubrick subiectul pentru 2001: A Space Odyssey și a scris romanul cu același titlu , l-a rugat pe prietenul său Marvin Minsky să se consulte cu privire la modul de a imagina un computer inteligent la bordul unei nave spațiale, informaticianul MIT era gata să asiste. Întrucât echipa sa de la MIT a produs o serie de sisteme care, în ciuda funcționalității lor limitate, puteau fi interpretate de unii drept „inteligență” reală, nimeni nu era mai potrivit pentru a inspira imaginația tehnologică a audienței lui Kubrick.22

CALCULATELE BRINCINC LA PĂMÂNT

Apariția AI ca domeniu științific a coincis astfel cu descoperirea că miturile populare despre computere afectează modul în care tehnologiile AI sunt percepute și interpretate de către public. Totuși, atâta timp cât accesul la computer a fost limitat la o mică comunitate de experți, așa cum a fost cazul cel puțin până în anii 1950, problema modului în care oamenii percepeau sistemele AI a fost mai mult speculativă decât practică. Deși „creierele computerelor” și roboții umanoizi captau imaginația publicului, puțini oameni au fost capabili să observe în mod direct cum funcționează AI, cu atât mai puțin să interacționeze cu tehnologiile AI. Lucrurile, însă, se mișcau repede. La sfârșitul anilor 1950 și în timpul anilor 1960, o serie de inovații teoretice și practice au deschis noi căi către interacțiunea cu computerele. Aceste eforturi au adus cu ele un accent reînnoit pe rolul utilizatorilor umani în sistemele de calcul, care, la rândul lor, ar informa reflecțiile și aplicațiile practice referitoare la rolul componentei umane în IA.

Una dintre cele mai populare idei din teoria media a lui McLuhan este că mass-media sunt „extensii ale bărbatului” (și ale femeii, ar trebui să adăugăm)23. Cea mai comună interpretare a acestui concept este că noile media schimbă oamenii la nivel antropologic, afectând modul în care indivizii accesează lumea, precum și scara sau modelul societăților umane. McLuhan susține, de exemplu, că
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roata servește ca o prelungire a picioarelor umane, accelerând mișcarea și schimbul în spațiu. Drept urmare, roata a permis noi forme de organizații politice, cum ar fi imperiile, și a schimbat oamenii la nivel social, cultural și chiar antropologic. Privită dintr-o perspectivă complementară, totuși, noțiunea că mass-media sunt extensii ale oamenilor sugerează, de asemenea, un alt aspect important al mass-media: că acestea sunt menite să-i vină pe oameni. Media sunt concepute, dezvoltate și fabricate astfel încât să se poată adapta utilizatorilor lor – în cuvintele lui McLuhan, pentru a deveni extensiile lor. Parafrazând un text vechi, omenirea a creat mass-media după imaginea sa, după imaginea omenirii le-a creat...

Este ușor de văzut cum acest lucru se aplică diferitelor tipuri de media. Invenția cinematografiei, de exemplu, a fost rezultatul nu numai a unor eforturi prodigioase de inginerie, ci și a unor studii de-a lungul unui deceniu despre funcționarea percepției umane. Cunoștințele despre viziune, percepția mișcării și atenția au fost încorporate în proiectarea cinematografiei, astfel încât noul mediu să poată oferi o iluzie eficientă și să distreze publicul din întreaga lume.24 De asemenea, au fost construite medii de sunet, de la fonograf la MP3. conform modelelor de auz uman. Pentru a îmbunătăți capacitatea, păstrând în același timp calitatea sunetului, frecvențele care nu sunt la îndemâna auzului uman au fost ignorate, adaptând reproducerea tehnică la ceea ce și cum suportăm de fapt.25 Problema nu era atât de mult cum un cilindru de fonograf timpuriu, un vinil. înregistrare sau un MP3 sunat în termeni fizici; așa sunau pentru oameni. Așa cum se propune în această carte, acesta este motivul pentru care toate mediile moderne încorporează decepția banală: ele exploatează limitele și caracteristicile senzoriale și psihologiei umane pentru a crea efectele particulare care se potrivesc utilizării intenționate și pregătite.

Calculatoarele nu fac excepție în acest sens. De-a lungul istoriei computerului, au fost dezvoltate o multitudine de sisteme diferite care au permis noi forme de comunicare cu utilizatorii.26 În acest context, computerul a devenit din ce în ce mai evident o extensie a oamenilor, devenind un mediu de comunicare. Necesitatea unor căi mai accesibile și funcționale de interacțiune între computere și utilizatorii umani i-a stimulat pe informaticieni să interogheze modurile în care oamenii accesează și procesează informațiile și să aplice cunoștințele pe care le-au adunat în dezvoltarea sistemelor și interfețelor interactive. Nu spre deosebire de ceea ce s-a întâmplat cu cinematograful sau media audio, acest efort a presupus explorarea modalităților în care computerele ar putea fi făcute „după imaginea omenirii”.

În timp ce istoria IA este de obicei scrisă ca fiind diferită de istoria interacțiunii om-calculator, trebuie doar să ne uităm la dezvoltarea timpurie a IA pentru a realiza că nu este posibilă o astfel de distincție rigidă.27 Epoca de aur
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AI a coincis nu doar cronologic cu apariția sistemelor informatice interactive ca domeniu specific de cercetare în științe informatice. În laboratoarele și centrele de cercetare din Statele Unite, Europa, Rusia și Japonia, obiectivul de a crea mașini „inteligente” a venit împreună cu obiectivul de implementare a sistemelor interactive care să asigure un acces mai larg, mai ușor și mai funcțional la computere. Acest lucru a fost recunoscut în mod deschis de oamenii de știință în domeniul informaticii ai vremii, care considerau Sistemele om-mașină în mare parte în domeniul de competență al AI.28 Diviziunea dintre IA și interacțiunea om-calculator este, prin urmare, rodul unei partiții retrospective, mai degrabă decât un principiu de organizare util pentru înţelege istoria informaticii.29

Viziunea de ansamblu care a modelat dezvoltarea sistemelor interactive timpurii a fost „simbioza om-calculator”, un concept propus inițial de JRC Licklider într-un articol publicat în 1960, care a atins statutul de punct de referință unificator pentru cercetarea calculatoarelor și AI.30 Articolul a folosit conceptul de simbioză – o metaforă preluată din biologie – pentru a propune că interacțiunile în timp real ar deschide calea unui parteneriat între oameni și computere. Licklider credea că acest parteneriat, dacă ar fi implementat prin dezvoltări practice în hardware și software de calculator, ar „efectua operațiuni intelectuale mult mai eficient decât le poate realiza singur omul.”31 Katherine Hayles a susținut influent că apariția simbiozei om-calculator în calcularea postbelică. Cercetările au spart distincția dintre oameni și mașini, eliminând noțiunea de sine „natural” și reconceptualizând inteligența umană ca fiind coprodusă cu mașini inteligente.32 Viziunea lui Licklider despre simbioza dintre oameni și computere indică totuși și în altă direcție. Similar în acest sens cu testul Turing, această viziune a presupus recunoașterea faptului că mașinile de calcul trebuiau înțelese nu numai pe cont propriu, ci și prin interacțiunile lor cu utilizatorii umani.

Deși termenul de interacțiune a fost de obicei privilegiat, noua paradigmă a simbiozei s-a bazat pe presupunerea că oamenii și computerele ar putea intra în comunicare unul cu celălalt. Problema a fost că comunicarea era un concept fierbinte în AI și informatică. Teoria informației și cibernetica au privilegiat o înțelegere neîncarnată a comunicării care punea puțin sau deloc accent pe semnificația și contextul comunicării.33 Acesta a fost integrat într-un model care a scos în prim plan echivalența dintre creier și computere, fiecare văzut ca un dispozitiv de procesare a informațiilor a cărui funcționare. ar putea fi descris în principiu în abstract, mathematica! termeni.34 Înțelegerea comunicării ca neîncarnată a oferit un instrument simbolic puternic pentru a imagina, proiecta și
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implementează Sisteme om-calculator în termenii unui mecanism de feedback între două entități care vorbeau, ca să spunem așa, aceeași limbă. În același timp, însă, această abordare a intrat în conflict cu experiențele practice cu aceste Sisteme. Atunci când oamenii sunt implicați, de fapt, comunicarea este întotdeauna situată într-un mediu sociocultural. După cum va clarifica mai târziu Lucy Suchman, orice efort de a crea interacțiuni om-calculator implică inserarea unui sistem computerizat în situații din lumea reală.35

În spațiul dintre aceste două înțelegeri ale comunicării – neîncarnată și abstractă pe de o parte, ca în fundamentele teoretice ale informaticii, încorporate și scufundate în situații sociale pe de altă parte, ca și în experiențele practice cu noile sisteme interactive – se poate mai bine înțelegeți aparenta contradicție care a caracterizat explorarea multor pionieri ai inteligenței artificiale. Oamenii de știință de frunte au îmbrățișat mitul „mașinii care gândește”, care își are rădăcinile în ideea că creierul este o mașină și activitatea neuronilor poate fi descrisă matematic, la fel ca și operațiunile computerelor. În același timp, experiența de a crea aplicații AI și de a le pune în funcțiune i-a determinat pe oamenii de știință să ia în considerare perspectivele specifice ale utilizatorilor umani. Pentru a atinge obiectivul lui Licklider de un parteneriat simbiotic care să efectueze operațiuni intelectuale mai eficient decât oamenii singuri, procesele complexe ale computerelor electronice urmau să fie adaptate utilizatorilor. Calculatoarele, cu alte cuvinte, urmau să fie aduse „la pământ”, ca să spunem așa, astfel încât să poată fi ușor accesate și utilizate de oameni.

Pe măsură ce sistemele au fost dezvoltate și implementate, cercetătorii și-au dat seama că psihologia umană și percepția erau variabile importante în dezvoltarea interacțiunilor eficiente om-calculator. Studiile timpurii s-au concentrat pe probleme precum timpul de răspuns, atenția și memoria.36 Dezvoltarea în anii 1960 a partajării timpului, care a permis utilizatorilor să acceseze resursele computerului în ceea ce ei percepeau ca în timp real, este un exemplu.37 Unul dintre principalii oameni de știință în domeniul inteligenței artificiale, Herbert Simon, a susținut în articolul său din 1966 „Reflecții asupra partajării timpului din punctul de vedere al utilizatorului” că un sistem de partajare a timpului ar trebui considerat „principal și în esență un sistem om-mașină a cărui performanță depinde de cât de eficient este folosește software-ul nervos uman, precum și hardware-ul computerului.”38 În consecință, împărțirea timpului a trebuit să fie modelată pe baza modurilor în care oamenii primesc și procesează informațiile. De asemenea, pentru Martin Greenberger, care a cercetat atât AI, cât și time-sharing la MIT, computerele și utilizatorii trebuiau considerate „cele două părți ale partajării timpului”. Doar o perspectivă care să privească ambele părți ar duce la dezvoltarea sistemelor funcționale.39 În acest sens, a observat el, timpul în comun a fost „cu siguranță o concesie pentru utilizator și o recunoaștere a punctului său de vedere.”40
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Este important să ne amintim că „utilizatorul” la care se refereau cercetători precum Greenberger nu era orice fel de utilizator. Cel puțin până la apariția computerului personal la sfârșitul anilor 1970 și începutul anilor 1980, utilizatorii umani erau în principal matematicienii și inginerii care proiectau și rulau cele mai vechi sisteme informatice. Odată cu visul simbiozei om-calculator câștigând teren, conceptualizările utilizatorilor au început să se extindă la „executiv”, dar totuși au menținut un accent foarte restrâns pe bărbații albi, educați. Acest lucru corespundea în inteligența artificială cu reprezentarea „umanului”, la a cărui imagine sistemele inteligente urmau să fie calibrate, în termeni extrem de restrictivi cu privire la rasă, gen și clasă – o mistificare care a dus, de-a lungul istoriei informaticii, în forme. de părtinire şi inegalitate care au informat tehnologiile de calcul până în prezent.41

În climatul de cercetare înfloritoare în domeniul inteligenței artificiale, noul accent pus pe perspectiva utilizatorului i-a stimulat pe cercetători să se întrebe de ce și în ce condiții oamenii consideră mașinile „inteligente”. Cercetătorii în inteligența artificială au început să înțeleagă că, deoarece comunicațiile dintre oameni și mașini erau situate într-un context social și cultural, atribuțiile inteligenței către computere ar putea apărea și ca urmare a iluziei și a decepției. Difuzarea miturilor despre mașinile de gândire și creierul computerelor, în acest context, a crescut posibilitatea ca sistemele de calcul relativ simple să fie percepute ca inteligente de mulți, exagerând realizările domeniului.

Pe măsură ce tehnologii precum time-sharing și alte sisteme de interacțiune om-calculator au fost implementate cu rezultate din ce în ce mai reușite, această problemă a început să-i preocupe pe oamenii de știință de seamă AI, cum ar fi Minsky. După cum a raportat elevul său Joseph Weizenbaum, „Minsky a sugerat într-o serie de discuții că o activitate care produce rezultate într-un mod care nu pare de înțeles pentru un anumit observator va părea pentru acel observator ca fiind într-un fel inteligentă, sau cel puțin motivată în mod inteligent. . Când acel observator începe în sfârșit să înțeleagă ce s-a întâmplat, adesea are sentimentul că a fost puțin păcălit. Apoi pronunță comportamentul „inteligent” pe care l-a observat până acum ca fiind „doar mecanic” sau „algoritmic”.42 În lucrările unui simpozion din 1958 despre „Mecanizarea proceselor gândirii”, Minsky a admis că mașinile pot părea mai pline de resurse. și eficiente decât sunt de fapt. El a explicat în continuare că acest lucru depinde nu numai de funcționarea mașinilor, ci și de „resursele individului care face observația.”43 În teorie, Minsky credea în principiul că comportamentul unei mașini este întotdeauna explicabil în mecanicism. termenii, ca urmare a statelor sale trecute, a structurii interne, a contingentelor externe și a relațiilor sale
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între ele. În practică, însă, el a recunoscut că o mașină invită interpretări diferite de la diferiți observatori. O persoană cu puține cunoștințe despre calcul și matematică, de exemplu, poate vedea inteligență acolo unde un utilizator mai expert nu ar vedea-o. O dinamică similară, la urma urmei, caracterizează și judecățile despre inteligența și priceperea la oameni, care „sunt adesea legate de propriile noastre insuficiențe analitice și... schimbare cu schimbări în înțelegere.”44 Într-un alt articol, Minsky a susținut, prin urmare, că „inteligenta poate fi măsurată numai în raport cu ignoranța sau lipsa de înțelegere a observatorului.”45

Acestea nu erau simple note de subsol bazate pe observații întâmplătoare. Recunoașterea contribuției observatorului - descris ca un străin care se apropie de computere cu cunoștințe limitate despre IA - a semnalat realizarea că IA a existat doar într-un mediu cultural și social în care percepțiile, psihologia și cunoștințele utilizatorului au jucat un rol. Faptul că acest lucru a fost recunoscut și discutat de Minsky – un om de știință de frunte în inteligența artificială care a crezut cu fermitate că crearea computerelor gânditoare este un rezultat cert care trebuie atins într-un viitor relativ dozat – îl face cu atât mai semnificativ.46 Deși recunoașterea faptului că observatorii în mod greșit atribuirea inteligenței mașinilor ar putea părea în contradicție cu optimismul lui Minsky pentru perspectivele AT, contradicția se evaporă dacă se consideră că AI a apărut în relație de doză cu dezvoltarea sistemelor interactive om-calculator. Într-un context în care utilizatorii umani sunt din ce în ce mai expuși și interacționează cu computerele, a crede în posibilitatea de a crea mașini de gândire este pe deplin compatibil cu recunoașterea faptului că inteligența poate fi rodul unei iluzii. Chiar dacă mărturisește angajamentul deplin față de visul de a crea mașini de gândire, așa cum a făcut Minsky, nu se poate respinge perspectiva oamenilor ca parte a ecuației.

În anii 1960, o epocă în care atât inteligența artificială, cât și interacțiunea om-calculator au pus bazele pentru dezvoltarea lor ulterioară, problema observatorului – adică întrebarea cum răspund oamenii la mașinile de martori care prezintă inteligență – a devenit subiectul unei reflecții substanțiale. . Ciberneticianul și psihologul britanic Gordon Pask, de exemplu, a subliniat într-un articol din 1964 despre informatică că „proprietatea inteligenței implică relația dintre un observator și un artefact. Ea există în măsura în care observatorul crede că artefactul este, în anumite privințe esențiale, ca un alt observator.”47 Pask a remarcat, de asemenea, că o apariție a auto-organizarii implică unele forme de ignoranță din partea observatorului și a explicat la situații de lungime în care sistemele de calcul puteau fi programate și prezentate astfel încât să arate „amuzant de realiste”.48 Pe lângă dezbaterile teoretice, au fost dezvoltate artefacte reale pentru
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experimente cu reacțiile observatorilor la mașini care prezentau anumite forme de inteligență. La Bell Labs, de exemplu, părintele teoriei informației, Claude Shannon, și inginerul David Hagelbarger au construit două mașini de calcul care jucau jocuri simple prin principii de anticipare care preziceau alegerile adversarilor umani pe baza mișcărilor anterioare ale oamenilor. Mașinile au prezentat o serie impresionantă de victorii și au părut inteligente pentru mulți, în ciuda designului lor simplu, care a exploatat faptul că oamenii sunt previzibili din cauza capacității lor slabe de a genera modele aleatorii. Numind creațiile lor SEER (pentru „Sequence Extracting Robot”) și Mind Reading Machine, Hagelbarger și Shannon le-au atribuit pe jumătate în glumă un văl de omnisciență. Ei înțeleseseră importanța jocului cu imaginația oamenilor pentru a obține „Al ”49

Accentul pus pe observator corespundea noului accent pe care cercetările din alte domenii, în special fizicii cuantice, îl acordau rolului observației în informarea rezultatului experimentelor. Descoperirile în mecanica cuantică de către oameni de știință precum Werner Heisenberg, Niels Bohr și Erwin Schrôdinger au dezvăluit că simpla observare a unui fenomen schimbă în mod inevitabil acel fenomen. Acest lucru a spulberat certitudinea newtoniană că fenomenele fizice erau externe și independente de observatori. Astfel de descoperiri, deși s-au aplicat doar la nivelul mecanicii cuantice, care descrie natura la cea mai mică scară de atomi și particule subatomice, au stârnit reflecții despre rolul observatorilor în cercetarea științifică din alte domenii, de la științele sociale la științele naturii, și cibernetica informată și IA, ca o publicație cheie în acest domeniu, recunoscută în 196250.

În rezumat, mișcarea, declanșată de interacțiunea om-calculator, de a adapta computerele la utilizatorii umani a corespuns, în domeniul AI, cu realizarea că presupusa inteligență a computerelor ar putea fi și rodul eșecului utilizatorilor și observatorilor de a înțelege. cum funcționează computerele. Deși climatul general de optimism și entuziasm din domeniu a marginalizat abordarea favorizată de Turing, unele dintre întrebările puse de testul Turing au fost astfel integrate în paradigma IA dominantă până la sfârșitul anilor 1960.

În ciuda preocupărilor legate de mistificările realizărilor reale și ale funcționării computerului, cercetătorii din domeniul IA ar accepta tendința emergentă de a normaliza decepția și de a o face funcțională pentru implementarea oricărei interacțiuni om-calculator. În timp util, această tendință ar deschide calea pentru creșterea retoricii ușurinței de utilizare care a dominat industria computerelor încă din anii 1980.
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SEMNIFICAȚIILE TRANSPARENȚEI SAU CUM (NU) SĂ RIPILĂ MAGIA

Eforturile timpurii de a transmite publicului semnificația inteligenței artificiale au arătat că există mituri populare care echivalau computerele cu „creierul electronic”. În loc să fie înțelese ca mașini raționale a căror promisiune uimitoare a rămas în sfera științei, computerele au fost adesea reprezentate ca dispozitive cvasi-magice gata să depășească capacitatea oamenilor în cele mai diverse domenii.

În acest context, comunitatea AI în curs de dezvoltare a văzut apariția sistemelor de interacțiune om-calculator ca o potențială oportunitate de a influența modurile în care computerele au fost percepute și reprezentate în sfera publică. Într-un număr al Scientific American dedicat inteligenței artificiale în 1966, pionierul AI John McCarthy a propus că noile sisteme interactive ar oferi nu numai un control mai mare asupra computerelor, ci și o mai bună înțelegere în rândul unei comunități largi de utilizatori. În viitor, a susținut el, „abilitatea de a scrie un program de calculator va deveni la fel de răspândită ca și abilitatea de a conduce o mașină”, iar „a nu ști să programezi va fi ca și cum ai trăi într-o casă plină de servitori și nu vorbește limba lor. .” În mod crucial, potrivit lui McCarthy, cunoștințele sporite ar ajuta oamenii să dobândească mai mult control asupra mediilor de calcul.51

Viziunea lui McCarthy a reprezentat o soluție potențială la problema observatorului. Faptul că unii utilizatori tindeau să atribuie mașinilor inteligență nejustificată, de fapt, se credea că depinde strict de lipsa de cunoștințe despre calcul.52 Mulți membri ai comunității AI erau, prin urmare, încrezători că caracterul înșelător al AI va fi risipit, ca un truc magic. , oferind utilizatorilor o mai bună înțelegere a funcționării sistemelor informatice. Odată ce programarea era la fel de răspândită ca și conducerea unei mașini, au motivat ei, problema se va evapora. Oamenii de știință din inteligența artificială precum McCarthy și-au imaginat că sistemele interactive ar fi contribuit la atingerea acestui obiectiv, făcând computerele mai accesibile și mai bine înțelese decât oricând.

O astfel de speranță, însă, nu a ținut cont de faptul că decepția, așa cum arată istoria mass-media, nu este o componentă tranzitorie, ci mai degrabă o componentă structurală a interacțiunilor oamenilor cu tehnologia și mass-media. Pentru a crea efecte estetice și emoționale, mass-media are nevoie de utilizatori să cadă în forme de iluzie: ficțiunea, de exemplu, stimulează publicul să-și suspende temporar neîncrederea, iar televiziunea oferă o iluzie puternică de prezență și viață.53 În mod similar, interacțiunea dintre oameni și computere. se bazează pe interfeţe care asigură un strat de iluzie care ascunde Sistemul tehnologic la care
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ele dau acces. Dezvoltarea sistemelor de calcul interactive a însemnat, prin urmare, că magia și decepția, mai degrabă decât să fie respinse, au fost încorporate în proiectarea interfeței.54

Pe lângă simbioză, informaticienii au folosit o multitudine de alte metafore pentru a descrie efectele sistemelor interactive timpurii.55 În articolul său despre împărțirea timpului, citat mai devreme, Martin Greenberger a ales o imagine deosebit de interesantă. Pentru a-și corobora ideea conform căreia trebuie luate în considerare atât perspectivele computerelor, cât și ale utilizatorilor, el a comparat timpul partajat cu ochelarii de vedere.56 Această metaforă optică a subliniat faptul că, deoarece ambele părți ale interacțiunii „au văzut” procesul printr-o perspectivă diferită. , inginerii și designerii trebuiau să calibreze lentilele ambelor componente pentru a le ajuta să navigheze într-un mediu comun și să intre în interacțiune unul cu celălalt. Mijloacele optice, însă, au fost studiate și dezvoltate încă din antichitate pentru a face iluzii și trucuri. În acest sens, comparația lui Greenberger poate sugera că interacțiunea om-calculator avea ceva în comun cu modul în care un prestidigitător manipulează percepțiile publicului pentru a crea un efect special pe scenă. Timpul partajat este, la urma urmei, o formă de iluzie în sine, care ascunde funcționarea internă a computerelor și o adaptează la percepțiile utilizatorilor umani asupra timpului și sincronicității.57 Temeiul dezvoltării schimbului de timp este că computerele sunt mai repede decât oamenii. Deși un computer se ocupă de fapt de un proces la un moment dat, făcându-se pe rând între ei, datorită timpului partajat utilizatorii au impresia de continuitate a propriei interacțiuni. După cum subliniază McCorduck, este „într-adevăr un truc bazat pe nepotrivirea dintre încetineala reacției umane și viteza computerului.”58

Oamenii de știință din studiile media au sugerat că nu numai timpul partajat, ci și toate interfețele se bazează în esență pe decepție. În termeni tehnici, o interfață este un punct de interacțiune între orice combinație de componente hardware și software, dar cuvântul este în general folosit pentru a descrie dispozitive sau programe care permit utilizatorilor să interacționeze cu computerele.59 Deoarece o interfață produce o mediere între diferite straturi, Lori Emerson sugerează că interfața acordă acces, dar „acționează, de asemenea, în mod inevitabil ca un fel de pelerină a magicianului, dezvăluind continuu (straturi mediatice, fragmente de informații etc.) prin ascunderea și ascunderea pe măsură ce se dezvăluie.”60 În mod similar, observă Wendy Hui Kyong Chun. că o interfață construiește un paradox între invizibilitate și vizibilitate. Interfețele de utilizator Graphie, de exemplu, „ne oferă o relație imaginară cu hardware-ul nostru: ele nu reprezintă tranzistori, ci mai degrabă desktop-uri și coșuri de reciclare.”61 Fabricarea interfețelor pentru computer, în acest sens, presupune crearea de lumi imaginare care ascund structura de bază a Sisteme tehnice la care dau acces.62
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Interfețele funcționează pentru a acorda acces la computere, ascunzând în același timp complexitatea sistemelor, se referă la modul în care, discutat în capitolul anterior, AI facilitează o formă de decepție ludică. Prin dinamica jocului imaginată de Turing, iluzia inteligenței a fost do-mesticată pentru a facilita o interacțiune productivă între om și mașină. În mod similar, una dintre caracteristicile interfețelor computerelor este că sunt concepute pentru a aduce în practică propria dispariție iluzorie, astfel încât utilizatorii să nu perceapă frecarea dintre interfață și Sistemul de bază.63 Iluzia, în acest context, este normalizată. pentru ca acesta să pară natural și fără întreruperi pentru utilizatori. Din acest motiv, implementarea interacțiunii om-calculator a coincis cu descoperirea că, în ceea ce privește oamenii, chiar și lucruri precum neînțelegerea și decepția informează noua simbioză.

În numărul științific american din 1966 despre inteligența artificială, Anthony G. Oettinger a reunit visul lui McCarthy de a spori accesul la computere cu opinii proprii și diferite despre interfețele software. Subliniind necesitatea unor sisteme mai ușoare, care să facă computerul ușor de înțeles pentru toată lumea, el a propus conceptul de „calculatoare transparente” pentru a descrie ceea ce el considera a fi unul dintre obiectivele cheie ale ingineriei software contemporane: transformarea proceselor complexe ale hardware-ului de calcul în „un instrument puternic, la fel de ușor de utilizat ca pixul și hârtia.”64 Odată ce interesul pentru ceea ce s-a întâmplat în interiorul mașinii a dat loc interesului pentru ceea ce se poate realiza cu computerele, a prezis el, calculatoarele vor fi gata să servească o varietate enormă de funcții și roluri. Destul de remarcabil, în același articol, el a descris computerul ca o „cutie neagră foarte versatilă și convenabilă.”65 Acest concept, așa cum sa menționat, descrie artefacte tehnologice care oferă puține sau deloc informații despre funcționarea lor internă. Citind acest lucru în sensul său literal, ar trebui să presupunem că computerele trebuiau făcute transparente și opace în același timp. Desigur, Oettinger se juca cu o conotație secundară a cuvântului „transparent”, adică ușor de folosit sau de înțeles. Faptul că această transparență urma să fie obținută prin opacizarea funcționării interne a calculatoarelor este unul dintre paradoxurile ironice ale computerului modem în era ușurinței de utilizare.

Din anii 1980, industria computerelor, inclusiv companii precum IBM, Microsoft și Apple, a îmbrățișat ideea de design transparent. Credincioși în această privință cali-ului lui McCarthy cu două decenii mai devreme, ei și-au propus să facă computere la fel de răspândite ca și mașinile; s-au diferenţiat, totuşi, în privinţa mijloacelor de atingere a acestui scop. În loc să îmbunătățească cunoștințele de calculator prin învățarea tuturor să programeze, ei au dorit să facă computerele mai simple și mai intuitive, astfel încât oamenii fără expertiză să le poată folosi (și cumpăra). Designul „transparent” nu se referea la software-ul care își expune interiorul
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mecanisme, ci mai degrabă interfețe software care ascunde funcționarea computerelor pentru a oferi utilizatorilor un model ușor și intuitiv.66 Scopul designului transparent a fost de a face interfețele computerelor invizibile și fără cusături și astfel, conform susținătorilor săi, mai naturale și mai integrate pentru viața fizică a utilizatorilor. Totuși, ca într-o ispravă de magie, această conotație particulară a transparenței trece prin interacțiunea dintre complexitatea tehnică din interiorul mașinii și arătând un mediu extrem de controlat la suprafață.67 Designul transparent sublimează sistemele informatice cu o serie de reprezentări, încorporate. în interfață, care ajută utilizatorii să înțeleagă operațiunile dispozitivului doar în măsura necesară pentru a-l utiliza. Așa cum notează Lori Emerson, industria computerelor contemporane vinde un vis în care granița dintre om și mașină este eradicată prin „prelucrari sofisticate care au loc la nivelul interfeței.”68 A face computerele ușor de utilizat este, în acest sens , un exercițiu de decepție „prietenoasă” asupra utilizatorilor. Este un truc la care ne predăm voluntar atunci când folosim oricare dintre gadgeturile noastre digitale, de la laptopuri la tablete, de la e-readere la smartphone-uri.

Apple, IBM și alți giganți ai industriei computerelor nu au fost primii care au adoptat această abordare. Oricât de ciudat și contradictoriu ar fi acest concept, „transparența opacă” a început să modeleze dezvoltarea interfețelor software în anii 1960 și continuă și astăzi. Transparența a devenit principiul de organizare pentru producerea de interfețe care să permită interacțiunea fără întreruperi cu utilizatorii.69 Între timp, în comunitatea înfloritoare de AI, visul de a risipi aura magică a computerelor urma să fie înlocuit de conștientizarea că percepțiile utilizatorilor despre sistemele de calcul ar putea fi manipulate pentru a îmbunătăți interacțiunile dintre oameni și mașini. Sistemele interactive AI, de fapt, sunt ele însele interfețe care construiesc straturi de iluzie și ascund funcționarea mașinii. Tendința utilizatorilor de a atribui inteligență mașinilor (care fuseseră recunoscute și descoperite de cercetătorii AI precum Minsky) poate fi astfel domesticită și exploatată prin mecanisme specifice de proiectare a interacțiunii. A face computerele „transparente”, așa cum a propus Oettinger, a fost realizată în cadrul decepției banale.

Mașinile de calcul au fost încă de la început parte dintr-o cultură plină de viață a minunii: de la automatele din secolul al XIX-lea până la apariția computerelor electronice, o cultură a expoziției și a reprezentării a furnizat hrană constantă miturii mașinilor de gândire și asocierea dintre creierele și computerele.70 Totuși, sentimentul de magie pe care îl inspiră computerele nu are de-a face doar cu exagerarea reportajelor din ziare sau cu visele populare ale science fiction-ului. Acest sentiment este înrădăcinat în ambele părți ale interacțiunii om-calculator. Pe de o parte, acest sentiment
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a magiei își are rădăcinile în relațiile oamenilor cu obiectele și în tendința naturală a oamenilor de a atribui inteligență și socialitate lucrurilor. Pe de altă parte, acest sentiment este încorporat în funcționarea interfețelor computerelor care apar prin construirea de straturi de iluzie care ascunde (în timp ce fac „transparente”) complexitatea de bază a sistemelor de calcul. Din acest motiv, chiar și astăzi, informaticienii rămân conștienți de dificultatea de a risipi credințele false atunci când se referă la percepțiile și utilizările AI.71 Magia IA este imposibil de risipit deoarece coincide cu logica de bază a interacțiunii om-calculator. . Cheia rezistenței miturilor AI nu se găsește, așadar, în miturile extravagante despre creierul mecanic și roboții umanoizi, ci în jocul inocent de a ascunde și afișa, care îi face pe utilizatori gata să îmbrățișeze decepția prietenoasă și banală a „gândirii”. ” mașini.

Dezvoltatorii din domeniul informaticii ar introduce posibilitatea decepției într-un cadru mai larg care promită acces universal și ușurință în utilizare pentru tehnologiile de calcul, care au informat munca menită să îmbunătățească interacțiunea om-calculator. Explorările lor au implicat o schimbare crucială de la a considera decepția ceva ce poate fi risipit prin îmbunătățirea cunoștințelor despre computere și către integrarea deplină a formelor de decepție banală în experiența utilizatorilor care interacționează cu computerele. După cum arată următorul capitol, necesitatea acestei schimbări a devenit evidentă în primele încercări de a crea sisteme AI care vizează interacțiunea cu noile comunități de utilizatori care accesează computere prin sisteme de partajare a timpului. Unul dintre ei, chatbot-ul ELIZA, nu numai că a stimulat reflecții explicite asupra relației dintre computer și deception, dar a devenit și un adevărat arhetip al caracterului înșelător al AI. Dacă testul Turing a fost un experiment de gândire conceput de o minte creativă, ELIZA a fost testul Turing transformat într-un artefact real: o bucată de software care a devenit o cauză celebră în istoria AI.
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CAPITOLUL 3

Efectul ELIZA

Joseph Weizenbaum și apariția chatbot-urilor

Dacă sunt întrebați despre ELIZA, primul chatbot creat vreodată, asistentul AI al Apple Siri – sau cel puțin, versiunea Siri instalată în telefonul meu – are un răspuns (fig. 3.1).
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O cunoști pe Eliza

Тар pentru a Editare >

ELIZA este prietena mea bună. A fost un psihiatru strălucit, dar acum s-a pensionat.

Figura 3.1 Conversația autorului cu Siri, 15 martie 2018.

Răspunsul îl încadrează pe Siri într-o lungă traiectorie istorică de experiențe și experimente cu programe AI concepute pentru a conduce conversații cu oamenii.1 ELIZA este, de fapt, considerată pe scară largă primul chatbot al istoriei sau, după cum a spus Andrew Leonard, „bot erectus — primul software.
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program pentru a uzurpa identitatea unei ființe umane cu succes.”2 Capacitatea sa de a trece drept om, cel puțin în unele situații, a făcut din acesta o sursă de inspirație pentru generații de dezvoltatori în procesarea limbajului natural și alte aplicații AI care se angajează cu limbajul, până la sistemele contemporane. precum Siri și Alexa.

Acest capitol examinează crearea ELIZA la MIT în 1964-1966 și interoghează moștenirea acesteia, examinând dezbaterea animată pe care a stimulat-o în comunitatea AI și în sfera publică. Adesea discutat în trecere în studiile istorice despre AI, computere și media, cazul ELIZA merită o atenție mult mai dedicată. De fapt, crearea și recepția ELIZA a lui Weizenbaum a fost un moment crucial pentru istoria media digitală, nu numai pentru că programul este considerat primul care a purtat o conversație în limbaj natural, ci și pentru că ELIZA a fost un obiect disputat care a devenit centru al narațiunilor concurente care modelează controversele și discursurile cheie despre impactul computerelor și al media digitală.

Concentrându-mă pe discuțiile despre cum să interpretăm funcționarea și succesul ELIZA, susțin că a avut influență nu atât la nivel tehnic, ci mai ales la nivel discursiv. Oferind dovezi despre modul în care sistemele AI relativ simple ar putea înșela utilizatorii și să creeze o impresie de umanitate și inteligență, ELIZA a deschis noi perspective pentru cercetătorii interesați de inteligență artificială și de agenți conversaționali, cum ar fi chatboții. În timp ce programul era relativ nesofisticat, mai ales în comparație cu sistemele contemporane, narațiunile și anecdotele care circulă despre el au determinat reflectarea asupra modului în care vulnerabilitatea oamenilor la decepție ar putea fi exploatată pentru a crea interacțiuni eficiente între oameni și mașini. Ca atare, ELIZA este un exemplu emblematic al modului în care artefactele, și în special software-ul, au vieți sociale și culturale care privesc circulațiile lor materiale la fel de mult ca narațiunile care apar și circulă despre ele.

Odată cu crearea ELIZA, informaticianul de origine germană Joseph Weizenbaum a fost hotărât să sublinieze caracterul iluzoriu al inteligenței computerelor. Cu toate acestea, unele dintre narațiunile apărute din crearea ELIZA au întărit ideea că mașinile și oamenii gândesc și înțeleg limbajul în moduri similare. În consecință, programul a fost interpretat ca o dovadă în favoarea a două viziuni diferite, chiar contrastante: pe de o parte, că AI oferă doar aparența inteligenței; pe de altă parte, că AI ar putea replica de fapt inteligența și înțelegerea prin mijloace artificiale. În următoarele decenii, de altfel, au ajuns să fie descrise mecanismele de proiecție care informează utilizarea chatbot-urilor și a altor agenți AI.
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ca „efectul ELIZA”. În acest sens, ELIZA este mai mult decât o bucată de software învechit: este o jucărie filozofică care, la fel ca dispozitivele optice inventate în secolul al XIX-lea pentru a disemina cunoștințele despre iluzie și percepție, este totuși o reamintire că puterea AI își are originea în tehnologie la fel de mult ca si in perceptia utilizatorului.

CREAȚIA ELIZA CA ARTEFACT ȘI NARAȚIUNE

Deși implicațiile și semnificația reală a testului Turing sunt încă în centrul unei dezbateri aprinse, este fără îndoială că testul a contribuit la stabilirea unor obiective practice pentru comunitatea de cercetători AI care s-a dezvoltat în deceniile următoare. În ceea ce este probabil cel mai influent manual AI din informatică, Stuart Russell și Peter Norvig recunosc rolul cheie al testului în dezvoltarea unei înțelegeri speciale a cercetării în acest domeniu, bazată pe așa-numita abordare comportamentală, care urmărește scopul. de a crea computere care acționează ca oameni. Programele concepute în IA comportamentală, explică ei, sunt concepute pentru a prezenta mai degrabă decât să reproducă efectiv inteligența, lăsând astfel deoparte problema a ceea ce se întâmplă în interiorul „creierului” mașinii.3

Pe măsură ce Weizenbaum a preluat o poziție de academie la MIT în 1964 pentru a lucra la cercetarea AI, munca sa a fost informată de o abordare similară.4 În scrierile sale, el a susținut că IA a fost și ar trebui să fie distinsă de inteligența umană. Cu toate acestea, el a făcut eforturi pentru a proiecta mașini care să-i facă pe oameni să creadă că interacționează cu agenți inteligenți, deoarece era încrezător că realizarea utilizatorilor că au fost înșelați îi va ajuta să înțeleagă diferența dintre inteligența umană și AI.

Între 1964 și 1966, Weizenbaum a creat ceea ce este considerat primul chatbot funcțional, adică un program de calculator capabil să interacționeze cu utilizatorii printr-o interfață în limbaj natural.5 Funcționarea ELIZA a fost destul de simplă. După cum a explicat Weizenbaum în articolul care descrie invenția sa, ELIZA a căutat în textul trimis de partenerul său de conversație cuvinte cheie relevante. Când a fost găsit un cuvânt cheie sau un model, programul a produs un răspuns adecvat în conformitate cu regulile de transformare specifice. Aceste reguli s-au bazat pe un proces în două etape prin care intrarea a fost mai întâi descompusă, împărțind propoziția în segmente mici. Segmentele au fost apoi reasamblate, readaptate conform regulilor adecvate – de exemplu, prin înlocuirea pronumelui „eu” cu „tu” – și au fost adăugate cuvinte programate pentru a produce un răspuns. În cazurile în care era imposibil să recunoașteți un cuvânt cheie, chatbot-ul folosea elemente preconfigurate
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formule, cum ar fi „Văd” sau „Vă rugăm să continuați” sau, alternativ, ar crea un răspuns printr-o structură de „memorie” care se bazează pe intrările introduse anterior.6

Pus la dispoziția utilizatorilor Sistemului de partajare a timpului Project MAC de la MIT, programul a fost conceput pentru a se angaja în conversații cu utilizatori umani care au răspuns scriind pe o tastatură, o situație similară cu un serviciu de mesagerie contemporan sau cu o cameră de chat online. În acest sens, însăși posibilitatea ELIZA a rezidat pe disponibilitatea unei comunități de utilizatori care ar putea să se angajeze în conversații cu chatbot-ul datorită dezvoltării de noi sisteme de interacțiune om-calculator.7

Weizenbaum a fost ferm în susținerea sa că ELIZA nu a dat dovadă de inteligență, ci de iluzia acesteia. Programul ar demonstra că oamenii în interacțiunile cu computerele sunt vulnerabili la decepție.8 După cum a recunoscut Weizenbaum într-un interviu cu Daniel Crevier, un istoric al inteligenței artificiale, ELIZA a fost succesorul imediat al unui program care juca un joc numit Five-in-a- row sau Go-MOKU, care a fost descris în primul său articol publicat, intitulat potrivit „Cum să creeze un computer inteligent.”9 Programul folosea o strategie simplă, fără anticipare, dar putea învinge pe oricine care juca la același nivel naiv. și a urmărit să creeze „o iluzie puternică că computerul era inteligent.”10 După cum se menționează în articolul în care a fost descris pentru prima dată, a fost capabil să „păcălească unii observatori pentru un timp”. Într-adevăr, decepția a fost, pentru Weizenbaum, măsura succesului pentru autorul unui program de inteligență artificială: „succesul său poate fi măsurat prin procentul de observatori expuși care au fost păcăliți înmulțit cu perioada de timp pe care nu au reușit să-i prindă. pe." Pe baza acestui criteriu, Weizenbaum a considerat programul său ca fiind destul de reușit, deoarece a făcut mulți observatori să creadă că computerul se comporta inteligent, oferind o „iluzie minunată a spontaneității”.11

Având în vedere puterea limitată a computerului și resursele disponibile, ELIZA a avut, de asemenea, destul de mult succes în a înșela utilizatorii, cel puțin atunci când interacțiunea s-a limitat la o conversație relativ scurtă. Eficacitatea sa s-a datorat unor intuiții care nu țineau strict de domeniul programării, ci derivate din intuiții din psihologie și din înțelegerea de către Weizenbaum a comportamentului uman în conversații. Își dăduse seama că percepția noastră asupra identității unui partener de conversație este crucială pentru credibilitatea oricărei interacțiuni umane. Astfel, pentru a trece în mod convingător pentru un om, un chatbot nu trebuie doar să răspundă corect la o anumită intrare, ci și să joace un rol coerent pe parcursul conversației.12 În consecință, el a conceput ELIZA ca pe un program care ar putea fi adaptat la diferite roluri, pe care le-a numit, folosind una dintre metaforele sale teatrale caracteristice, scenarii. În arhitectura software a ELIZA, scripturile erau tratate ca date, ceea ce implica
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că „nu făceau parte din programul în sine”. În ceea ce privește tiparele de conversație, un script corespundea unui anumit rol pe care robotul l-ar juca pe parcursul unei conversații.13

În versiunea inițială a lui ELIZA, numită DOCTOR, scenariul programului a simulat un psihoterapeut care folosește metoda Rogerian - un tip de terapie nondirectivă în care terapeutul reacționează la discursul pacientului, în principal, redirecționând-o înapoi către pacient, adesea sub formă de continuare. întrebări.14 Alegerea acestui rol a fost crucială pentru succesul ELIZA: de fapt, dinamica terapiei a permis programului să susțină o conversație, adăugându-i puțin, dacă nu, ceva. Rezultatele sunt evidente în unele fragmente dintr-o conversație cu ELIZA pe care Weizenbaum a publicat-o în primul său articol pe acest subiect. (Contribuțiile ELIZA sunt cu majuscule.)

Bărbații sunt toți la fel.

IN CE FEL

Mereu ne deranjează cu ceva sau altceva.

VA POATE GANDI LA UN EXEMPLU SPECIFIT

Ei bine, iubitul meu m-a pus aici.

PRIETENUL TĂU TE-A FĂCUT SĂ VENI AICI

El spune că sunt deprimat de cele mai multe ori.

Îmi pare rău pentru că ești deprimat.15

Numele ELIZA s-a bazat, a explicat Weizenbaum, pe personajul Eliza Doolittle din piesa lui George Bernard Shaw Pygmalion. În piesă, specialistul în fonetică, profesorul Higgins, pariază cu un prieten că, cu cunoștințele sale de fonetică, o poate antrena pe Eliza, o florară din Covent Garden cu accent cockney, într-o femeie la fel de echilibrată și de bine vorbită ca și membru al grupului. aristocrația.16 Aceasta corespundea speranței lui Weizenbaum că programul său va deveni mai refinat și mai variat, la fel ca vânzătoarea sub tutela profesorului Higgins.17 Alegerea unei opere literare precum Pygmalion, care interoghează problema autenticității și a performanței, a fost nu accidentai. Fidelă abordării comportamentale a lui Weizenbaum, care, după cum am explicat mai devreme, urmărea mai degrabă simularea decât replicarea inteligenței umane, ELIZA semăna cu faima Eliza din Pygmalion pentru că a creat o aparență de realitate, rămânând, totuși, „în domeniul dramaturgului. ”18 De fapt, Weizenbaum și-a comparat adesea creația cu un actor sau actriță care „improvizează după anumite linii directoare, adică în cadrul unui anumit Sistem sau – să păstrăm imaginea teatrului – interpretează un
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un anumit rol.”19 Pentru a sublinia că ELIZA era capabilă să producă doar impresia de realitate, el a mers până acolo încât să sublinieze că „într-un fel ELIZA era o actriță care comanda un set de tehnici, dar care nu avea nimic din ea. propriu a spune” și să-l descrie ca pe o „parodie” a unui psihoterapeut nondirectiv.20

Pentru Weizenbaum, operațiunile ELIZA puteau fi echivalate cu actorie și, mai larg, conversația – și, în consecință, interacțiunile verbale om-mașină – era o chestiune de joc de rol. După cum a clarificat într-un articol dedicat problemei, așa cum spunea titlul, „Înțelegerea contextuală de către computere”, și-a dat seama că contribuțiile subiecților umani sunt esențiale pentru astfel de interacțiuni. Oamenii fac presupuneri despre partenerii lor de conversație, atribuindu-le roluri specifice; astfel, un program de conversație este credibil atâta timp cât își joacă cu succes rolul. Iluzia produsă de program se va prăbuși în momentul în care ipotezele contextuale făcute de partenerul uman încetează să mai fie valabile – un fenomen care, notează Weizenbaum, stă la baza efectelor comice create în comediile erorilor.21

În deceniile de la crearea ELIZA, metafora teatrală a fost folosită de savanți și comentatori pentru a discuta despre munca lui Weizenbaum și, mai larg, a devenit un mod comun în care comentatorii și dezvoltatorii descriu deopotrivă funcționarea chatbot-urilor.22 Acest lucru este semnificativ deoarece, așa cum George Lakoff și Mark Johnson au demonstrat faimos, apariția de noi metafore pentru a descrie lucruri și evenimente poate avea ca rezultat orientarea atitudinilor față de acestea și în ghidarea acțiunilor viitoare.23 În timp ce metafora teatrului a fost folosită de Weizenbaum pentru a demonstra că AI a fost rodul un efect iluzoriu, o altă comparație pe care a folosit-o a indicat și mai explicit problema decepției: el a remarcat, de fapt, că credința utilizatorilor că ELIZA înțelege de fapt ceea ce spuneau „este comparabilă cu convingerea multor oameni că ghicitorii într-adevăr au o perspectivă profundă.”24 Asemenea unui ghicitor, mesajele ELIZA au lăsat suficient spațiu de interpretare pentru ca utilizatorii să umple golurile, astfel încât „„simțul” și continuitatea pe care le percepe persoana care conversa cu ELIZA sunt furnizate în mare măsură de persoană. însuși.”25

După cum au arătat istoricii tehnologiei, tehnologiile funcționează nu numai la nivel material și tehnic, ci și prin narațiunile pe care le generează sau în care sunt forțate.26 David Edgerton, de exemplu, arată rachetele V2 pe care armata germană le-a dezvoltat și angajat la Sfârșitul Războiului Mondial II Deși rachetele au fost ineficiente dacă se ia în considerare cantitatea de resurse utilizate și efectele lor practice, dezvoltarea lor
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a fost util la nivel simbolic, deoarece a păstrat vii speranțele victoriei. Cu alte cuvinte, rachetele au funcționat, în primul rând, mai degrabă la nivel narativ decât material.27 Un discurs similar s-ar putea aplica software-ului. Gândiți-vă, de exemplu, la programul de șah Deep Blue, care l-a învins celebru pe maestrul de șah Garry Kasparov în 1997. IBM făcuse investiții considerabile pentru a dezvolta Deep Blue, dar odată ce provocarea a fost câștigată și atenția jurnaliștilor s-a evaporat, IBM a demontat proiectul și a realocat inginerii care lucrau la el în diferite sarcini. Compania, de fapt, era interesată de capacitatea programului de a crea o narațiune – una care să plaseze IBM în fruntea progresului în calcul – mai mult decât de potențiala sa aplicație dincolo de provocarea Kasparov.28

Într-un mod similar, ELIZA a fost mai ales eficientă la nivel discursiv, mai degrabă decât practic. Weizenbaum a fost întotdeauna transparent cu privire la faptul că ELIZA avea o aplicație practică limitată și ar fi influențată în a arunca lumină asupra unei căi potențiale mai degrabă decât în contextul utilizării sale imediate.29 După cum subliniază pe bună dreptate Margaret Boden, în ceea ce privește munca de programare, ELIZA a fost simplă. până la punctul de a fi învechit chiar și în momentul creării sale și s-a dovedit în mare măsură irelevant din punct de vedere tehnici pentru dezvoltarea ñeldului, în esență pentru că Weizenbaum „nu urmărea să facă un calculator să „înțeleagă” limbajul.”30 Interesul său profund. , dimpotrivă, în modul în care programul ar fi interpretat și „citit” de către utilizatori sugerează că a urmărit crearea unui artefact care ar putea produce o narațiune specifică despre computere, AI și interacțiunea dintre oameni și mașini. ELIZA, în acest sens, a fost un artefact creat pentru a dovedi punctul său conform căruia AI ar trebui înțeleasă ca un efect al tendinței utilizatorilor de a proiecta identitatea. Cu alte cuvinte, ELIZA a fost o narațiune despre programele conversaționale la fel de mult cât a fost un program conversațional în sine.

Weizenbaum, însă, nu era interesat să înșele utilizatorii de computere. Dimpotrivă, el se aștepta ca o anumită interpretare a lui ELIZA să apară din interacțiunile utilizatorilor cu ea, deoarece ei și-au dat seama că inteligența aparentă a mașinii era doar rezultatul decepției. inteligența programată în mașină, dar ca efect iluzoriu. Această narațiune ar înlocui, prin urmare, mitul „mașinii de gândire”, care sugera că computerele ar putea echivala cu inteligența umană, cu o narațiune mai consecventă cu abordarea comportamentală din AL32. Privind înapoi la creația ELIZA, el a explicat că a fost concepută ca o „programare”. truc”33 – chiar o „glumă”.34 Arătând că un program de calculator de o complexitate atât de limitată ar putea păcăli oamenii să creadă că este real, ELIZA ar funcționa ca o demonstrație a faptului că oamenii, care se confruntă cu tehnologiile „AI”, sunt vulnerabili. la decepţie.
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Abordarea lui Weizenbaum reamintește în acest sens utilizarea în epoca victoriană a jucăriilor filozofice precum caleidoscopul sau fenakistoscopul, care ilustrau o idee despre optică printr-un dispozitiv care manipula percepțiile privitorului și, în același timp, îi distra.35 De fapt, Weizenbaum a remarcat că unul dintre motivele succesului ELIZA a fost acela că utilizatorii puteau interacționa jucăuș cu acesta.36 A fost destinat utilizatorilor noului sistem de partajare a timpului de la MIT, care ar fi stimulați de acesta să reflecte nu numai asupra potențialului AI, ci și și, în mod esențial, asupra limitărilor sale, deoarece „trucul de programare” a creat mai degrabă iluzia inteligenței decât inteligența în sine.

Succesul lui Weizenbaum de a transforma ELIZA în sursa unei narațiuni specifice despre AI ca decepție este evident în poveștile care au circulat despre primirea ELIZA. O anecdotă celebră îl privea pe secretarul lui Weizenbaum, care odată i-a cerut să părăsească camera, având nevoie de puțină intimitate pentru a discuta cu ELIZA. El a fost deosebit de surprins de această solicitare, deoarece secretarul știa foarte bine cum funcționa programul și cu greu putea să-l considere un bun ascultător.37 O altă anecdotă despre ELIZA se referă la un vânzător de calculatoare care avea un schimb de teletip cu ELIZA fără să știe că era un program de calculator; interacțiunea l-a făcut să-și piardă cumpătul și să reacționeze cu furie.38 Ambele anecdote au fost amintite extrem de des pentru a sublinia tendința oamenilor de a fi înșelați de aparența inteligenței AI – deși unii, precum Sherry Turkle, subliniază că povestea secretarei ar putea dezvălui în schimb tendința utilizatorilor de a menține iluzia că ELIZA este inteligentă „din cauza propriilor dorințe de a insufla viață unei mașini.”39

În astfel de anecdote, care au jucat un rol cheie în informarea recepției programului, ideea că IA este rezultatul decepției devine fundamentată printr-o narațiune simplă și eficientă. Într-adevăr, una dintre caracteristicile anecdotelor este capacitatea lor de a fi amintite, repovestite și diseminate, transmițând semnificații sau prejudicii despre persoana sau lucrul la care se referă. În biografii și autobiografii, de exemplu, anecdotele adaugă caracterului narativ al genului, care, deși este neflcțional, se bazează pe povestire și, în același timp, contribuie la impunerea unor pretenții despre persoana care face obiectul biografiei. schițați, de exemplu, temperamentul, personalitatea și aptitudinile ei.40 În recepția lui ELIZA, anecdota despre secretară a jucat un rol similar, impunând un model recurent în care funcționarea programului era prezentată publicului în termeni de decepție. . Julia Sonnevend a demonstrat în mod convingător că una dintre caracteristicile celor mai influente narațiuni despre evenimentele media este „condensarea” lor într-o singură frază și o scurtă narațiune.41 Alții s-au referit la un proces similar în termeni laturieni ca la un proces similar.
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„pasteurizarea” narațiunii, în care „germenii sunt eliminați în numele unei explicații simple, raționale și puternice.”42 Prin pasteurizarea narațiunii, elementele care nu se întâlnesc cu narațiunea dominantă despre un anumit eveniment sunt desconsiderate, privilegiând o narațiune mai coerentă și mai stabilă. În acest sens, anecdotele despre decepție și în special povestea secretarei au „condensat” sau „pasteurizat” povestea ELIZA, prezentând-o publicului ca o narațiune puternică despre capacitatea computerelor de a înșela utilizatorii.

METAFORA CALCULATORULUI ȘI NARAȚIA

A MAȘINILOR DE GÂNDIRE

După cum am arătat, scrierile lui Weizenbaum demonstrează că el a programat-o, de asemenea, pe ELIZA în mod special, cu intenția de a prezenta o viziune specială a inteligenței artificiale bazată pe ceea ce poate fi descris drept narațiunea decepției. Acest lucru a fost fundamentat în anecdote despre recepția ELIZA, care au circulat pe scară largă și au modelat discuțiile despre semnificațiile și implicațiile programului. Weizenbaum nu a considerat, totuși, că, deși era capabil să controleze comportamentul programului, el nu va fi capabil să controleze — sau să folosească limbajul informatic, să „programeze” — toate narațiunile și interpretările care ar rezulta din acesta. Cu toate acestea, în mod neașteptat pentru creatorul său, primirea ELIZA a presupus și apariția unei a doua narațiuni, care a prezentat perechea programului nu ca o iluzie de succes, ci ca o dovadă că computerele pot echivala sau depăși inteligența umană.

După cum sa discutat în capitolul 2, computerele din istoria lor timpurie au fost prezentate ca creiere mecanice sau electronice ale căror operațiuni ar putea fi capabile să reproducă și să depășească rațiunea umană.43 În formă narativă, această viziune corespunde poveștilor dintr-o gamă largă de scenarii științifico-fantastice din care roboți și computere prezintă caracteristici umane, precum și rapoartele jurnalistice care exagerează realizările computerelor.44 Deși rezultatele în IA, în special în istoria timpurie a câmpului, erau adesea departe de a fi comparabile cu inteligența umană, chiar și cercetătorii care au fost conștienți de limitele domeniului tindeau să supraevalueze realizările AI, hrănind narațiunea computerelor ca „mașini care gândesc.”45

Această narațiune contrastează puternic cu principiul lui Weizenbaum conform căruia IA ar trebui înțeleasă mai degrabă în termeni de efect iluzoriu decât ca dovadă că mașina înțelege și raționează ca oamenii. El a susținut că a crede că computerele sunt mașini de gândire este similar cu a distra credințe superstițioase. În primul său articol care o descrie pe ELIZA, el a subliniat
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a constatat că computerele ar putea fi considerate de către profani ca și cum ar face magie. Cu toate acestea, „odată ce un anumit program este demascat, odată ce funcționările sale interioare sunt explicate într-un limbaj suficient de clar pentru a induce înțelegerea, magia sa se prăbușește; se dezvăluie ca o simplă colecție de producători, fiecare destul de comprehensibil.”46 Făcând acest punct, Weizenbaum părea să nu conștientizeze o împrejurare care privește orice autor – de la scriitoarea unui roman până la un inginer cu cel mai recent proiect al ei: odată ce creația cuiva ajunge. opinia publică, indiferent cât de atent s-a reflectat cineva asupra semnificațiilor creării sale, aceste semnificații pot fi răsturnate de lecturile și interpretările altor scriitori, oameni de știință, jurnaliști și laici. Un program de calculator poate arăta, în ciuda intenției programatorului, ca și cum ar face magie; pot apărea noi narațiuni, suprascriind narațiunea pe care programatorul a vrut să o încorporeze în mașină.

Acesta a fost ceva ce Weizenbaum avea să învețe din experiență. Recepția publică a lui ELIZA, de fapt, a presupus apariția unei narațiuni foarte diferite de cea pe care intenționase să o „programeze” în mașină. Odată cu apariția în 1968 a filmului științifico-fantastic clasic al lui Stanley Kubrick 2001: O odiseea spațiului, mulți au crezut că ELIZA este „ceva în doză față de HAL fictiv: un program de calculator suficient de inteligent pentru a înțelege și a produce limbaj uman arbitrar.”47 Mai mult, Weizenbaum. și-a dat seama că cercetarea care a tras sau urmărit din munca sa a fost condusă de înțelegeri foarte diferite despre scopul și obiectivele AL. Un psiholog de la Universitatea Stanford, Kenneth Mark Colby, a dezvoltat PARRY, un robot conversațional al cărui design se baza în mod vag pe ELIZA, dar reprezenta un alt mod. interpretarea tehnologiei. Colby spera că chatbot-urile vor oferi un instrument terapeutic practic prin care „câteva sute de pacienți pe oră ar putea fi gestionați printr-un sistem informatic conceput în acest scop.”48 În anii anteriori, Weizenbaum și Colby colaboraseră și s-au angajat în discuții, iar Weizenbaum și-a exprimat mai târziu unele îngrijorări că fostul său colaborator nu a acordat credit adecvat muncii sale pe ELIZA; dar principala problemă în controversa care a urmat între cei doi oameni de știință a fost pe motive morale.49 Un chatbot care oferă terapie pacienților reali era de fapt o perspectivă pe care Weizenbaum a considerat dezumanizantă și lipsită de respect față de implicarea emoțională și intelectuală a pacienților, așa cum a afirmat mai târziu. abundent de clar50. Se pune întrebarea, a afirmat el, „dorim să încurajăm oamenii să-și conducă viața pe baza fraudei brevetelor, șarlatanismului și irealității? Și, mai important, credem cu adevărat că îi ajută pe oamenii care trăiesc în lumea noastră deja prea asemănătoare unei mașini să prefere terapia administrată de mașini față de cea oferită de alți oameni?”51 Acest lucru reflecta convingerea sa fermă că existau sarcini care, chiar și dacă este posibil din punct de vedere teoretic sau practic, un computer nu trebuie programat să facă.52
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ELIZA a atras o atenție considerabilă în domeniile informatică și IA, precum și în ziare și reviste populare.53 Aceste relatări, totuși, au ignorat adesea faptul că eficacitatea sa se datora unui efect înșelător. Dimpotrivă, succesul ELIZA de a arăta ca un agent conștient a fost prezentat într-un mod care a susținut narațiunile larg răspândite despre computere ca „mașini care gândesc”, exagerând astfel capacitățile lui AL. Această prezentare era tocmai ceea ce Weizenbaum sperase să evite încă de la primele sale contribuții la ñeld, în care intenționase să dezvăluie ceea ce face ca un computer să pară inteligent, dezmințind o impresie de inteligență și înțelegere pe care o considera înșelătoare. Acest lucru l-a determinat să reproiecteze ELIZA, astfel încât programul să-și dezvăluie neînțelegerile, să ofere explicații utilizatorilor și să alunge confuzia acestora.54

Weizenbaum s-a îngrijorat că modul în care funcționarea ELIZA a fost relatată de alți oameni de știință și în presă a contribuit la consolidarea a ceea ce el a numit „metafora computerului”, prin care mașinile erau comparate cu oamenii, iar capacitatea software-ului de a crea aparența inteligenței a fost schimbată cu inteligența însăși.55 În numeroase scrieri de-a lungul anilor, Weizenbaum ar deplânge tensiunea dintre realitate și percepția publică asupra funcționării efective a computerelor. Problema, a subliniat el, nu era doar credulitatea publicului; a fost, de asemenea, tendința oamenilor de știință de a-și descrie invențiile în moduri exagerate sau inexacte, reieșind din faptul că neexperții nu sunt capabili să distingă între ceea ce ar putea fi adevărat și ceea ce ar putea nu. Într-o scrisoare către New York Times, în care a criticat afirmațiile supraoptimiste făcute de Jeremy Bernstein într-un articol despre mașinile cu auto-reproducere, Weizenbaum a subliniat „responsabilitatea foarte specială” a scriitorului de știință față de cititorul neprofesionist care „nu are nicio soluție. ci pentru a interpreta scrierea științifică foarte literal.”56 Așa cum a remarcat Weizenbaum într-o conversație cu un jurnalist la The Observer, narațiunile experților ar putea avea efecte practice, deoarece „limbajul în sine devine doar un instrument de manipulare a lumii, care nu este diferit în principiu de limbaje folosite pentru manipularea calculatoarelor.”57 Cu alte cuvinte, pentru Weizenbaum, utilizarea unor discursuri și narațiuni particulare ar putea avea efecte asupra realității mult în felul în care instrucțiunile codificate de un programator s-ar putea adapta în operațiuni care declanșează schimbări în lumea reală. 58 Din acest motiv, Weizenbaum a considerat ca o datorie importantă pentru oamenii de știință să fie exacti și să evite senzaționalismul atunci când își comunică cercetările.

În Computer Power and Human Reason (1976), Weizenbaum subliniază că laicii sunt deosebit de vulnerabili la reprezentările distorsionate în acest context, deoarece computerele sunt tehnologii a căror funcționare reală este puțin cunoscută, dar care exercită o putere puternică asupra imaginației
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public, aducând „o anumită aură — derivată, desigur, din știință.”59 El era îngrijorat de faptul că, dacă concepțiile publice despre tehnologiile de calcul erau greșite, atunci deciziile publice cu privire la guvernarea acestor tehnologii erau probabil să fie și ele greșite. 60 Faptul că computerul devenise o metaforă puternică, în opinia sa, nu a contribuit cu nimic la îmbunătățirea înțelegerii acestor tehnologii în rândul publicului. Dimpotrivă, argumentează el, o metaforă „sugerează credința că tot ceea ce trebuie cunoscut este cunoscut”, rezultând astfel o „închidere prematură a ideilor” care susține mai degrabă decât atenuează lipsa de înțelegere a conceptelor științifice complexe legate de AI și calcul.61

Oamenii de știință ai culturii digitale au arătat cum metafore precum cloudul oferă narațiuni care susțin reprezentări puternice și uneori inexacte ale noilor tehnologii.62 Cu toate acestea, sa acordat mai puțină atenție rolului unor artefacte particulare, cum ar fi software-ul, în stimularea apariţia unor astfel de metafore. Cu toate acestea, introducerea software-ului stimulează adesea reacții puternice în sfera publică. Jocurile digitale precum Death Race sau Grand Theft Auto, de exemplu, au jucat un rol cheie în dirijarea narațiunilor media despre efectele jocurilor.63 După cum Weizenbaum a recunoscut perceptiv, modurile în care funcționarea ELIZA a fost relatată de alți oameni de știință și în presă a contribuit. la consolidarea „metaforei computerului”, prin care capacitatea software-ului de a crea aparența inteligenței a fost schimbată cu inteligența în sine. Deși a conceput și programat-o pe ELIZA cu așteptarea că va ajuta oamenii să îndepărteze aura magică a computerelor, narațiunile care au apărut din examinarea publică a invenției sale întăreau de fapt aceleași metafore pe care intenționa să le risipească.

REINCARNATINC ELIZA

Dezvoltatorii Apple l-au programat pe Siri să răspundă la întrebări despre ELIZA cu propoziția „ELIZA este prietena mea bună. A fost o psihologă strălucită, dar acum s-a pensionat” (ñg. 3.1). Procedând astfel, ei și-au propus nu numai să omagieze primul exemplar de acest fel, ci și să facă propria lor creație, Siri, să pară inteligentă. Unul dintre modurile în care Siri ca personaj diferă de alți asistenți vocali, cum ar fi Alexa, este de fapt utilizarea de către Siri a ironiei, prin care i se dă o personalitate distinctă. Pe Internet, puteți găsi mai multe pagini web care raportează unele dintre cele mai amuzante răspunsuri de la Siri. Dacă i se cere „să vorbească murdar”, de exemplu, Siri (sau mai bine spus, unele versiuni ale lui Siri) răspunde: „Covorul are nevoie de aspirare.”64 În mod similar, formularea particulară a propoziției lui Siri despre ELIZA arată, de asemenea, un grad de ironie. Legătura dintre cele două
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Systems este prezentat ca o prietenie, un fel de relație afectivă care contrastează cu natura lor de artefacte, dar dezvăluie ambiția dezvoltatorilor de a crea iluzia umanității. ELIZA este descrisă ca un psihiatru strălucit, chiar dacă Weizenbaum a subliniat neîncetat că oferă doar iluzia inteligenței și era, de fapt, opusul deșteptului. Referindu-se la pensionarea ELIZA, mai mult, dezvoltatorii lui Siri se joacă în glumă cu faptul că a făcut parte dintr-o altă generație, a cărei moștenire a fost preluată de asistenți virtuali precum Siri și altele asemenea.

Într-adevăr, ironia ar putea fi cea mai bună modalitate de a aduce un omagiu primului chatbot din istorie. După cum sa discutat mai devreme, Weizenbaum a subliniat de multe ori că ELIZA a fost menită să fie o parodie a unui psihoterapeut, subliniind intenția ironică a creației sale. Era o glumă despre psihoterapie, caricatura unui psihiatru. Așa cum subliniază Janet H. Murray în studiul său despre modul în care media digitală remodelează narațiunea, ELIZA a fost, de asemenea, „primul personaj complet bazat pe computer” care a pus „accent parodiei pe unele absurdități familiare ale terapiei în sine.”65 Dacă personajele funcționale. din literatură, cinema sau televiziune sunt uneori atât de familiare publicului încât oamenii le tratează ca și cum ar exista cu adevărat, ceva similar s-a întâmplat cu memoria ELIZA, care a devenit un spectru electronic bântuind sistemele AI contemporane și, mai larg. , cultura informatică în ansamblu.

Moștenirea creației lui Weizenbaum este prezentă și astăzi nu într-un fel, ci în mai multe feluri. După cum notează Noah Wardrip-Fruin, ELIZA a devenit, în deceniile de după crearea sa, „una dintre cele mai faimoase demonstrații ale potențialului de calcul din lume.”66 ELIZA este discutată ca un experiment care pune întrebări cheie despre modul în care utilizatorii proiectează simțul și sensul pe mașini. Și ELIZA continuă, de asemenea, să interacționeze cu utilizatorii contemporani de computere, ca un chatbot cu care oricine este echipat cu un dispozitiv și o conexiune la Internet poate începe un dialog. De fapt, mai multe reîncarnări ale lui ELIZA sunt disponibile pentru utilizatorii cu care pot conversa pe diferite site-uri web de pe Internet (ñg. 3.2). Ele sunt avatare ale creației lui Weizenbaum, deși nu copii exacte, deoarece sunt rescrise într-un limbaj de programare diferit.67 Modul în care utilizatorii contemporani sunt invitați să se implice jucăuș cu ei întărește comparația cu jucăriile filozofice din epoca victoriană, care a servit la dovedirea unei punct despre iluzie și percepție, precum și pentru a distra. În mod similar, avatarurile ELIZA încurajează interacțiunile jucăușe online, dar stimulează și reflecțiile asupra naturii Sistemelor AI și asupra impulsului interior al oamenilor de a intra în relație cu ele.

Profilul media înalt al ELIZA a fost esențial, așa cum subliniază Boden, pentru a aduce testul Turing la vocabularul neprofesionaților, precum și pentru a-i consolida prezența în vocabularul AL68 Mai ales la nivel discursiv, moștenirea ELIZA a jucat un rol crucial. rol în modelarea reflexiilor
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Eliza

ELIZA: Ce faci. Picase spune-mi problema ta.

TU: Am probleme cu Siri

ELIZA: Spui că ai probleme cu Siri?

TU: Da, Siri îmi spune că ești prietenul ei, dar eu nu cred. ELIZA: Înțeleg.

TU: Ar trebui să cred în ceea ce îmi spune Siri?

ELIZA: Spui că ar trebui să crezi în ceea ce îți spune Siri dintr-un motiv special?

TU: Pentru că Siri spune că este prietenul tău

ELIZA: De ce ești îngrijorat de prietenul meu?

TU: Nu mă preocupă prea mult Siri, ci să înțeleg sensul a ceea ce spune ea

ELIZA: Pentru că nu ești prea îngrijorat de Siri, ai venit la mine?

TU: Cred că ești cu siguranță supraevaluată, ELIZA ELIZA: Ce te face să crezi că sunt cu siguranță supraevaluată?

Vorbiți Resetare

Figura 3.2 Conversația autorului cu avatarul ELIZA, la http://www.masswerk.at/ elizabot/, 18 mai 2018. Autorul recunoaște că a căzut în decepția (banală?), făcând referire la o bucată de software printr-un feminin în loc de pronume neutru.

și experimente practice de a face oamenii și mașinile să interacționeze între ele prin limbaj până în prezent. Teza de doctorat Mark Marinos prezintă un sondaj care oferă dovezi că comunitățile de utilizatori și creatori de chatbot continuă să o considere pe ELIZA „progenitorul, un standard de aur și baza, o piatră de încercare semnificativă în evaluările actuale ale chatbot-urilor.”69

Una dintre particularitățile ELIZA este că a fost conceput de la început ca întruchipând o narațiune specifică despre computer și relația sa cu oamenii. După cum am arătat, Weizenbaum a considerat programul ca pe un artefact care ilustrează o teorie despre AI și interacțiunile om-calculator. Aceasta, însă, sa dovedit a fi doar una dintre interpretările asociate cu ELIZA. De fapt, narațiunile care prezentau programul ca dovadă a inteligenței computerelor – metafora computerului – au modelat prezența publică a software-ului. Aceasta, la rândul său, l-a stimulat pe Weizenbaum să propună o interpretare diferită a evenimentului, ceea ce i-a susținut caii să reflecteze critic asupra pericolelor și potențialelor probleme legate de utilizarea computerului.
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tehnologii. Cartea sa citită pe scară largă Computer Power and Human Reason a transformat-o pe ELIZA într-o narațiune puternică despre computere și media digitală, care a anticipat și, în multe feluri, a pregătit terenul pentru apariția unor abordări critice, contracarând apariția discursurilor tehno-utopice despre așa-numitele revoluție digitală.70 Astfel, ELIZA a devenit subiectul nu doar a uneia, ci a unei serii de narațiuni, care au contribuit, în acel moment fundamental pentru dezvoltarea mediilor digitale, viziuni alternative despre impactul și implicațiile computerului și AL.

Dacă Weizenbaum l-ar fi conceput pe ELIZA ca pe o teorie încorporată într-un program, alții după el au transformat-o și pe ELIZA într-o teorie despre agenți artificiali, utilizatori și AL comunicativ Chiar și astăzi, tendința oamenilor de a crede că un chatbot gândește și înțelege ca o persoană este adesea descris drept efectul Eliza, desemnând situațiile în care utilizatorii atribuie sistemelor informatice „calificări și abilități intrinseci pe care software-ul... nu le poate realiza”, în special atunci când este vorba de antropomorfizare.71 Efectul Eliza a rămas un subiect popular în rapoarte. a interacțiunilor cu chatboții, formând un model recurent în relatările despre incapacitatea ocazională a utilizatorilor de a distinge oamenii de programele de calculator.

Implicațiile particulare date efectului Eliza variază semnificativ de la un autor la altul. Noah Wardrip-Fruin, de exemplu, sugerează că decepția a fost rezultatul publicului care a dezvoltat o idee greșită despre funcționarea internă a chatbot-ului: „au presupus că, din moment ce aspectul de suprafață al unei interacțiuni cu programul, ar putea să semene cu ceva ca un dialog coerent. , pe plan intern, software-ul trebuie să fie complex.”72 Efectul Eliza, în acest sens, desemnează decalajul dintre mecanismele în cutie neagră ale software-ului și impresia de inteligență pe care o experimentează utilizatorii. Această impresie este informată de accesul lor limitat la mașină, dar și de preconcepțiile lor despre AI și computere.73

Turkle oferă o interpretare diferită și, în multe privințe, mai nuanțată a efectului Eliza. Ea folosește această interpretare pentru a descrie modurile în care utilizatorii, odată ce au știut că ELIZA sau un alt chatbot este un program de calculator, își schimbă modurile de interacțiune pentru a „ajuta” botul să producă răspunsuri inteligibile. Ea observă, de fapt, că utilizatorii ELIZA evită să spună lucruri despre care cred că o vor încurca sau să obțină răspunsuri prea previzibile. În acest sens, efectul Eliza demonstrează nu atât capacitatea AI de a înșela, cât și tendința utilizatorilor de a cădea de bunăvoie – sau poate cel mai potrivit, în mod mulțumit – în iluzie.74

Această interpretare a efectului Eliza reamintește răspunsurile mai largi pe care oamenii le au la tehnologiile digitale, dacă nu la tehnologie în ansamblu. După cum observă Jaron Lanier, „am demonstrat în mod repetat capacitatea fără fund a speciei noastre de a ne reduce standardele pentru a face tehnologia informației.
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arăta bine”: gândiți-vă, de exemplu, la profesorii care le-au oferit elevilor teste standardizate pe care un algoritm le-ar putea rezolva cu ușurință, sau la bancherii dinaintea prăbușirii financiare care au continuat să aibă încredere în mașini în direcționarea sistemului financiar.75 Prin urmare, efectul Eliza dezvăluie un profund dorința de a vedea mașinile ca fiind inteligente, care informează narațiunile și discursurile despre AI și computere, precum și interacțiunile de zi cu zi cu algoritmi și tehnologiile informaționale.

În acest sens, ELIZA, așa cum a spus Turkle, „a fost fascinantă nu numai pentru că era reală, ci și pentru că îi făcea pe oameni conștienți de propriile lor dorințe de a insufla viață într-o mașină.”76 Deși această dorință rămâne de obicei tacită în interacțiunile reale cu IA, poate dezvălui și o formă de pragmatism din partea utilizatorului. De exemplu, dacă un chatbot este folosit pentru a face o sesiune automată de psihoterapie, a se încadra în speli de efectul Eliza și astfel „ajutând” chatbot-ul să-și facă treaba ar putea îmbunătăți experiența utilizatorului. În mod similar, însoțitorii AI, cum ar fi roboții sociali sau chatboții, care sunt proiectați pentru a ține compania utilizatorilor, vor fi mai consolatori dacă utilizatorii îi împiedică să-și dezvăluie deficiențele alegând intrările la care pot răspunde. În plus, utilizatorii de asistenți vocali AI, cum ar fi Siri și Alexa, învață cele mai potrivite formulări pentru interogările lor, pentru a se asigura că acești asistenți își vor îndeplini sarcinile zilnice și îi vor „înțelege”. Ca o manifestare a decepției banale, în acest sens, efectul Eliza contribuie la explicarea de ce utilizatorii sunt complici cu mecanismele înșelătoare încorporate în AI: nu ca urmare a naivității lor, ci mai degrabă pentru că decepția are o anumită valoare practică pentru ei.

Stili, o asemenea bunăvoință aparentă nu ar trebui să ne facă să uităm cali pasionat al lui Weizenbaum să luăm în considerare beneficiile la fel de mult ca și riscurile tehnologiilor AI. Efectul Eliza, pentru însuși Weizenbaum, a reprezentat o dinamică de recepție care era „simptomatică a unor probleme mai profunde”: oamenii erau dornici să atribuie inteligență chiar dacă exista puține care să justifice o astfel de viziune.77 Această tendință ar putea avea efecte de durată, a raționat el, pentru că oamenii, după ce au construit inițial mașinile, ar putea ajunge să îmbrățișeze chiar modelele de realitate pe care le-au programat în ele, erodând astfel ceea ce înțelegem ca uman. Ca atare, pentru Weizenbaum, ELIZA a demonstrat că AI nu a fost sau cel puțin nu numai panaceul tehnologic care a fost vestit cu entuziasm de cercetătorii de frunte din domeniu.

DE CHATBOT ȘI UMANI

Taina Bûcher a propus recent noțiunea de „imaginar algoritmic” pentru a descrie modul în care oamenii experimentează și dau sens interacțiunilor lor.
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cu algoritmi în viața de zi cu zi.78 Ea observă că întâlnirile de zi cu zi cu tehnologiile de calcul sunt interpretate în moduri personale de către utilizatori și că aceste interpretări informează modul în care își imaginează, percep și experimentează mediile digitale. În timp ce Bûcher se concentrează în principal pe contextul interacțiunii cu tehnologiile moderne de calcul, cazul ELIZA arată că aceste interpretări sunt, de asemenea, informate de narațiunile și viziunile care circulă în jurul lor. De fapt, așa cum susține Zdenek, IA depinde de producerea de artefacte fizice și discursive: sistemele AI sunt „mediate de retorică” deoarece „limbajul le dă sens, valoare și formă”79. Această dependență se datorează, de asemenea, opacitatea caracteristică a software-ului, a cărui funcționare este adesea obscură pentru utilizatori și, într-o anumită măsură, chiar și pentru informaticieni, care lucrează adesea doar cu o înțelegere și cunoaștere parțială a Sistemelor complexe. Dacă narațiunile în acest sens ar putea lumina natura tehnică a software-ului pentru public, ele ar putea în același timp transforma software-ul în obiecte contestate ale căror semnificații și interpretări fac obiectul unor negocieri complexe în sfera publică.

ELIZA a fost un astfel de obiect contestat și, ca atare, a provocat întrebări despre relația dintre AI și decepție care rezonează până în prezent. În contextul unui domeniu IA emergent, ELIZA a oferit o perspectivă asupra modelelor de interacțiune dintre oameni și computere care contrastează doar aparent cu viziunea simbiozei om-calculator care a fost adoptată în același timp la MIT și în alte centre de cercetare din întreaga lume. lumea. De fapt, abordarea lui Weizenbaum asupra inteligenței artificiale în termeni de iluzie nu a fost deloc irelevantă pentru discuțiile mai ample despre interacțiunile om-mașină care modelau această tânără disciplină.

În istoriile de calcul și AI, Weizenbaum este de obicei prezentat ca un paria și o figură relativ izolată în domeniul AI. Acest lucru a fost cu siguranță adevărat în ultima parte a carierei sale, când atitudinea sa critică ia câștigat reputația de „eretic” în disciplină. Totuși, acesta nu a fost cazul în timpul lucrărilor sale timpurii pe ELIZA și alte sisteme AI, care au fost extrem de influente în domeniu și i-au asigurat o poziție titulară la MIT.80 Întrebările pe care le punea Weizenbaum la momentul lucrării sale la ELIZA erau nu explorările solitare ale unui proscris; câțiva dintre colegii săi, inclusiv unii dintre cei mai importanți cercetători ai vremii (după cum a arătat capitolul 2), îi întrebau și ei. În timp ce AI s-a dezvoltat într-un mediu eterogen care reunește mai multe perspective și abordări disciplinare, mulți au recunoscut că utilizatorii ar putea fi înșelați în interacțiunile cu mașini „inteligente”. Asemenea lui Weizenbaum, alți cercetători din domeniul IA în creștere și-au dat seama că oamenii nu sunt o variabilă irelevantă în ecuația AI: ei au contribuit în mod activ la apariția inteligenței, sau mai bine spus, la apariția acesteia.

[ 66 ] Media înșelătoare

Întrebările care au animat explorările lui Weizenbaum și polemica despre ELIZA, în acest sens, au informat nu numai munca dezvoltatorilor de chatbot și a oamenilor de știință AI. În diferite domenii de aplicații, dezvoltatorii de software au descoperit că tendința utilizatorilor de a proiecta informații sau agenții pe mașini a fost aprinsă de elemente specifice de proiectare a software-ului și că mobilizarea acestor elemente ar putea ajuta la realizarea unor programe și sisteme mai funcționale. În capitolul următor, explorez câteva exemple de modalități în care crearea de software s-a transformat într-o nouă ocazie de a interoga modul în care decepția a informat interacțiunea dintre computer și utilizatori. Cu toată specificitatea lor, aceste exemple vor arăta că efectul Eliza privește mult mai mult decât un vechi chatbot care ar fi putut înșela unii dintre utilizatorii săi: este, dimpotrivă, o dimensiune structurală a relației dintre oameni și sistemele de calcul.
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CARTA 4

De demoni, câini și copaci

Situarea inteligenței artificiale în software

Între anii 1970 și începutul anilor 1990, odată cu apariția computerului personal și cu trecerea la sistemele de rețea și calcularea distribuită, IA a făcut pași suplimentari pentru a fi încorporată în medii sociale din ce în ce mai complexe.1 Tehnologiile AI erau acum mai mult decât experimente izolate care testau limitele și potențialele de calcul, așa cum fusese în mare parte cazul până atunci. Din ce în ce mai des aceste tehnologii au fost puse la dispoziția comunităților de utilizatori și vizau aplicații practice. Proiecte de pionierat precum ELIZA au vizat mai ales comunități de practicieni, cum ar fi cea din jurul proiectului MAC de partajare a timpului de la MIT. Dar atunci când dispozitivele de calcul s-au mutat în centrul vieții de zi cu zi pentru mase de oameni, semnificația AI s-a schimbat iremediabil. La fel a făcut și sensul său: AI a preluat o viață socială proprie, pe măsură ce au apărut noi oportunități pentru interacțiunile dintre agenții artificiali și utilizatorii umani.

În mod oarecum paradoxal, aceste evoluții au coincis cu o lipsă de avere pentru întreprinderea AI. După entuziasmul anilor 1950 și 1960, o perioadă de deziluzie cu privire la perspectivele AI a caracterizat următoarele două decenii. Decalajul dintre miturile vizionare ale mașinilor de gândire și rezultatele reale ale cercetării AI a devenit evidentă, pe măsură ce o serie de lucrări critice au subliniat limitările practice ale sistemelor existente. Raportul Lighthill, comandat de British Science Research Council, de exemplu, a oferit o evaluare pesimistă a dezavantajelor AI, identificând „combinatoria! explozie”: în creșterea dimensiunii datelor, unele
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problemele devin rapid intratable.2 Alte lucrări critice, cum ar fi Alchimia și inteligența artificială a lui Herbert Dreyfus, au evidențiat, de asemenea, că realizările mult-anunțate ale cercetării IA erau departe de a aduce rezultate practice semnificative.3 Critica a subminat serios comunitatea AI în ansamblu, rezultând într-un climat de neîncredere publică în ceea ce privește cercetarea lor și într-o pierdere a credibilității și a finanțării: așa-numita iarnă AI.

Ca răspuns la aceasta, mulți cercetători la sfârșitul anilor 1970 și la începutul anilor 1980 au început să evite să folosească termenul AI pentru a-și eticheta cercetările chiar și atunci când lucrau la proiecte care ar fi fost numite AI cu doar câțiva ani mai devreme. Ei se temeau că, dacă ar adopta un astfel de termen pentru a descrie munca lor, lipsa generală de credibilitate a cercetării IA i-ar penaliza.4 Chiar dacă ar fi etichetate altfel, totuși, cercetările în domenii precum procesarea limbajului natural și IA comunicativă au continuat să se desfășoare în laboratoare din Statele Unite, Europa, Asia și întreaga lume, cu realizări semnificative.5 În plus, industria în ascensiune a software-ului pentru computer a sprijinit experimentarea cu noi modalități de aplicare a tehnologiilor AI în domenii precum computerele de acasă și jocurile. În acest timp, au fost făcuți pași cruciali care au implementat AI în noile sisteme interactive și s-au pregătit pentru IA comunicativă de astăzi, precum Alexa, Siri și Google Assistant.

Acest capitol examinează modalitățile în care AI a fost încorporată în sistemele software, concentrându-se pe trei cazuri particulare: programe de rutină numite demoni, jocuri digitale și interfețe sociale. Traiectoria acestor artefacte software diferite oferă o oportunitate de a reflecta asupra modului în care înțelegerea utilizatorilor despre computere și IA s-a schimbat de-a lungul timpului și modul în care astfel de schimbări sunt conectate cu evoluțiile interacțiunilor dintre oameni și mașinile de calcul. Observând o schimbare semnificativă de la sfârșitul anilor 1970 până în anii 1990 în modul în care participanții la studiile ei au perceput AI, Turkle a sugerat că apariția computerului personal și familiaritatea crescândă cu tehnologiile de calcul au făcut ca AI să pară mai puțin amenințătoare pentru utilizatori. Pe măsură ce computerele au devenit omniprezente și au preluat un număr tot mai mare de sarcini, includerea lor în mediile domestice și în viața de zi cu zi le-a făcut mai puțin înfricoșătoare și mai familiare pentru oameni.6 Integrarea tehnologiilor bazate pe inteligență artificială în software-ul care a ajuns să fie utilizat de zi cu zi de milioane de oameni din întreaga lume au ajutat utilizatorii și dezvoltatorii să exploreze potențialele și ambiguitățile AI, pregătindu-se pentru dezvoltarea sistemelor AI contemporane, nu numai la nivel tehnic, ci și cultural și social.

Reconstruirea istoriei software-ului, ca și a tuturor artefactelor tehnice, necesită o abordare pe mai multe straturi care să includă dimensiunile materiale, sociale și culturale ale tehnologiei.7 Cu toate acestea, caracterul particular al software-ului de calculator adaugă niveluri suplimentare de complexitate acestei întreprinderi. Ceea ce face istoria
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software-ul dur, după cum subliniază istoricul de calcul Michael S. Mahoney, este că nu este vorba în primul rând despre computere. Software-ul reflectă, pe de o parte, istoriile comunităților care le-au creat și, pe de altă parte, circumstanțele culturale, sociale și practice care stau la baza adoptărilor și utilizărilor sale. În situațiile și contextele specifice în care software-ul este utilizat și vehiculat se poate urmări rezultatele materiale reale și funcționarea acestuia.8 Urmărirea istoriei software-ului, prin urmare, necesită o perspectivă care este sensibilă la dimensiunile sale multiple.9 Este în acest sens. spirit că mă îndrept către istoriile artefactelor software la fel de diverse precum demonii computerelor, jocurile digitale și interfețele sociale. Fiecare dintre obiectele examinate ne spune ceva despre ce înseamnă AI astăzi, deoarece oportunitățile de integrare a AI în viețile și mediile de zi cu zi continuă să se extindă.

VORBIȚI CU PIETRE: DAEMONS, SOFTWARE ACENCY ȘI

IMAGINAȚIA

O dezbatere de lungă durată în domeniul informaticii se învârte în jurul problemei computerelor „creând” dincolo de ceea ce intenționau sau așteptau programatorii lor. Discuția se întoarce la matematicianul căruia i se atribuie primul programator de calculator din istorie, Ada Lovelace, care a înțeles încă de la mijlocul secolului al XIX-lea că calculatoarele pot fi folosite nu numai pentru a calcula numere, ci și pentru a compune muzică. produce grafice și promovează știința.10 În timp ce problema a fost dezbătută cu pasiune, astăzi puțini neagă capacitatea software-ului de a transcende agenția programatorului. De fapt, din cauza complexității sistemelor software contemporane și a opacității operațiunilor efectuate de rețelele neuronale, programatorii nu pot anticipa sau chiar înțelege producția software. Dar există un motiv suplimentar pentru care software-ul nu poate fi redus la agenția programatorilor. Odată „acolo”, software-ul este adaptat la diferite platforme, situate în contexte diferite, îmbrățișat de utilizatori și comunități diferiți și „realizat” în interacțiuni concrete, temporale.11 Software-ul este aplicat sau reciclat pentru a îndeplini obiective foarte diferite de acelea. destinat inițial. Este integrat în medii sociale și culturale diferite de cele de la origine. Este descrisă, percepută și reprezentată prin construcții culturale care se schimbă și ele în timp.

De aceea, amenzile aparent obscure și obișnuite ale software-ului generează adesea dinamici complexe de interpretare și semnificație. Unul dintre cele mai bune exemple în acest sens sunt așa-numitele demoni, adică programele de calculator care rulează în fundal și efectuează sarcini fără intervenția directă a utilizatorului. Demonii pot fi încorporați într-un sistem sau într-un
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mediu, dar rulează independent de alte procese. Odată activi, ei urmează instrucțiunile codificate pentru a finaliza sarcinile de rutină sau pentru a reacționa la anumite situații sau evenimente. O distincție crucială a demonilor față de alte utilitare software este că nu implică interacțiunea cu utilizatorii: „un adevărat daemon”, așa cum a spus Andrew Leonard, „poate acționa de la sine.”12 Daemonii furnizează servicii vitale care permit buna funcționare a sisteme de operare, rețele de calculatoare și alte infrastructuri software. Este posibil ca utilizatorii de e-mail să fi întâmpinat demonul-mailer omniprezent care răspunde la diverse probleme de corespondență, cum ar fi eșecurile de trimitere, nevoile de redirecționare și lipsa spațiului de cutie poștală. Deși nu știu, navigatorii care vizitează orice pagină web beneficiază și de demonii care răspund solicitărilor de acces la documente web.13

Originile cuvântului demon sunt demne de remarcat. În mitologia greacă, demonii erau atât divinități binevoitoare, cât și rele. Un demon a fost adesea prezentat ca un intermediar între zei și mortais – un mediu în sensul literal, adică „ceea ce este între”. În știința secolului al XIX-lea, cuvântul demon a ajuns să fie folosit pentru a descrie ființe funcționale care au fost incluse în experimentele gândirii în domenii precum fizica. Acești demoni i-au ajutat pe oamenii de știință să imagineze situații care nu puteau fi reproduse în experimente practice, dar care erau relevante pentru teorie.14 Cel mai faimos dintre acești demoni a fost protagonistul unui experiment de gândire al savantului britanic James Clerk Maxwell în 1867, în care a sugerat posibilitatea că a doua lege a termodinamicii ar putea fi încălcată. Potrivit lui Fernando Corbato, căruia i se atribuie de obicei inventarea demonilor computerizati, „folosirea noastră a cuvântului demon a fost inspirată de demonul lui Maxwell al fizicii și termodinamicii... Daemonul lui Maxwell a fost un agent imaginar care a ajutat la sortarea moleculelor la viteze diferite. și a lucrat neobosit în fundal. Am început cu fantezie să folosim cuvântul demon pentru a descrie procesele de fundal care au lucrat neobosit pentru a îndeplini treburile sistemului.”15

În interacțiunea om-calculator, demonii contribuie la ca computerele să fie „transparente”, rămânând în fundal și efectuând sarcini care ajută interfața și sistemul subiacent să funcționeze eficient și perfect. Astfel, demonii sunt adesea caracterizați ca slujitori care anticipează dorințele stăpânului și își folosesc propria inițiativă pentru a satisface astfel de nevoi, fără a fi observați de către utilizatorul-stăpân.16 Așa cum a observat recent Fenwick Mckelvey, totuși, demonii nu sunt niciodată simple mecanisme de serviciu. Având în vedere autonomia lor și rolul pe care îl joacă în marile infrastructuri digitale precum Internetul, ele ar trebui privite și ca mecanisme care controlează aceste infrastructuri: „deoarece demonii decid cum să aloce și să utilizeze resursele de rețea finite, alegerea lor influențează care rețele reușesc și care.
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eșuează, alocarea subtilă a resurselor, în timp ce pare să mențină deschiderea și diversitatea internetului.”17

În ciuda rolului lor crucial în deciderea formei Internetului și a altor sisteme, ar trebui să rezisi să atribuie inteligență sau personalități demonilor. Nu diferit de alte programe software, demonii sunt formați din linii de cod. În ochii noștri, capacitatea lor de a acționa autonom este cea care îi deosebește de software-ul precum procesoarele de text. Aceasta poate fi văzută ca agenție în mod similar modului în care lucrurile – după cum ne-au învățat antropologii sociali Arjun Appadurai și Alfred Geli – pot fi considerate agenți sociali.18 Se poate observa cu ușurință, de fapt, că oamenii atribuie intențiile obiectelor și mașinilor – gândiți-vă. , de exemplu, la furia cuiva față de un televizor sau un computer care funcționează defectuos. Agenția socială a obiectelor, totuși, are sens numai în măsura în care astfel de obiecte sunt încorporate într-o structură socială, în care lucrurile, inclusiv software-ul, circulă și funcționează cu consecințe distinctive pentru structurile sociale.19 Operațiunile software-ului au efecte reale în material. lume, dar agenția de software trebuie întotdeauna să fie interpretată, proiectată și atribuită de agenți umani, cum ar fi utilizatori, programatori sau designeri. Se poate spune, în acest sens, că agenția demonilor este obiectivă la nivel mecanic (întrucât operațiunile sale au efecte reale) dar subiectivă la nivel social (întrucât agenții umani sunt întotdeauna cei care proiectează semnificații sociale).

În consecință, pentru a înțelege demonii este necesar să ne uităm la efectele lor materiale, dar și la viața lor discursivă: cu alte cuvinte, la modul în care software-ul este perceput și reprezentat subiectiv de utilizatorii umani. O modalitate de a face acest lucru este utilizarea conceptului de biografie, care are două semnificații distincte. Biografia descrie, pe de o parte, cursul vieții unei persoane. Constituie un act de a da sens vieții unei persoane în ceea ce privește trecerea timpului; este, în sensul său cel mai literal, o viață înscrisă. Biografia unei piese de software presupune, prin urmare, examinarea istoriilor proceselor sale materiale contingente ale devenirii, care sunt încurcate în procesele și mediile sociale. Pe de altă parte, cuvântul biografie are un al doilea sens. Biografia este, de asemenea, un gen literar, o formă de narațiune contingentă care transformă personaje istorice, evenimente și lucruri în povești care urmează să fie scrise, spuse și vehiculate. Chiar și atunci când nu este implicat niciun text scris, viețile oamenilor sunt elaborate în narațiuni care circulă prin diferite canale, genuri și moduri. Transformată în narațiune, viețile indivizilor construiesc noi semnificații și semnifică alte lucruri. Biografiile întruchipează, de fapt, reprezentări particulare ale caracterului, temperamentului, personalității și aptitudinilor unei persoane, precum și noțiuni mai largi legate de profesia și agenția personajului. În acest al doilea sens, dezvăluirea biografiei demonilor și a altor software-uri implică examinarea schimbării
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moduri în care software-ul a fost perceput, descris și discutat. Acestea poartă semnele diferitelor atribute pe care oamenii le-au proiectat asupra lor de-a lungul vieții lor „biografice”.20

Luați în considerare, deci, originile demonilor computerului prin ambele sensuri ale cuvântului biografie. Demonii au fost introduși ca caracteristici de programare distinctive atunci când cercetătorii care lucrau la Proiectul MAC al MIT, condus de Fernando Corbato, au avut nevoie să implementeze rutine autonome pentru a gestiona funcționarea noilor lor sisteme de partajare a timpului. Demonii au fost programați în acest context ca piese de software care funcționau în fundal pentru a administra fără probleme sarcini cruciale în sistem, fără a fi necesar ca utilizatorul să le opereze direct. Totuși, în acest context, decizia lui Corbato de a-i numi demoni relevă tendința de a le atribui o anumită formă de umanitate, în ciuda faptului că au îndeplinit sarcini destul de simple și banale în Sistem. Recalii că, în miturile antice, se credea că demonii posedau voință, intenție și capacitatea de a comunica. S-ar putea susține că, deoarece Corbato avea o experiență în fizică, conceptul de demon a fost ales din cauza semnificației metaforei sale în știință, cu o conotație diferită, prin urmare, decât în mitologia greacă. Cu toate acestea, Maxwell (al cărui experiment de gândire privind cea de-a doua lege a termodinamicii a contribuit, după cum am menționat mai devreme, la introducerea termenului de demon în fizică) a deplâns că conceptul de demon a avut ca rezultat umanizarea agenției în experimentul său de gândire. El a observat că nu l-a numit în mod explicit pe protagonistul experimentului său de gândire un demon, această caracterizare fiind făcută de alții, în timp ce o descriere mai exactă ar fi fost mai degrabă un comutator automat sau o supapă decât o entitate antropomorfizată.21 Chiar și în fizică, prin urmare , folosirea termenului a fost privită în mod suspect, ca trădând tentația de a atribui agență unor dispozitive imaginare incluse în experimentele de gândire.

Alegerea denumirii lui Corbato, în acest sens, a fost un act de proiecție prin care un grad de conștiință și inteligență a fost atribuit implicit demonilor — înțeleși ca linii de cod capabile să exercite efecte în lumea reală. Semnificația acestei alegeri inițiale este și mai evidentă atunci când examinăm traiectorii mai largi în „biografia” demonului. După cum a susținut Andrew Leonard, este dificil să se facă distincția rigidă între demoni și unii dintre roboții care au locuit mai târziu comunități online, camere de chat și alte platforme în rețea, deoarece sarcinile de rutină atribuite de obicei demonilor sunt uneori preluate de chatbot cu o anumită formă de abilitate conversațională.22 Spre deosebire de demoni, boții sunt, de asemenea, folosiți pentru a executa sarcini necesare pentru a menține funcționarea unui sistem. Acestea includ, de exemplu, prevenirea spam-ului în forumuri, postarea automată de actualizări pe rețelele sociale și contribuția la moderarea în camerele de chat. Acest servilism,
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împărtășită de mulți demoni și roboți, ne amintește de modul în care asistenții vocali, cum ar fi Alexa de la Amazon, sunt prezentați ca servitori docili ai casei și ai membrilor familiei acesteia.

Cu toate acestea, asemănarea cheie dintre demoni și roboți se găsește probabil nu atât în ceea ce fac, ci în modul în care sunt văzuți. Una dintre diferențele dintre demoni și roboți este că primii lucrează „în tăcere” în fundal, în timp ce cei din urmă sunt de obicei programați astfel încât să poată intra în interacțiune cu utilizatorii.23 Odată încorporați în platforme și medii caracterizate de un grad ridicat de socializare. schimbă totuși demonii resisi această invizibilitate. După cum arată McKelvey, de exemplu, rezultatele activităților demonilor pe platformele online au stimulat reacții complexe. Grupurile de drepturi de proprietate și anticopyright din The Pirate Bay, de exemplu, au antagonizat demonii, precum și deținătorii de drepturi de autor, depunând eforturi specifice pentru a scoate la suprafață munca invizibilă a demonilor.24 De asemenea, spre deosebire de roți, demonii nu trebuie să interacționeze lingvistic cu utilizatorii. ' intrări. Totuși, așa cum arată chiar termenul ales pentru a le descrie, demonii invită și utilizatorii și dezvoltatorii să-i considere agenți.

Biografia demonilor de computer arată că software-ul, în ochii privitorului, preia o viață socială chiar și atunci când nu este implicată nicio interacțiune aparentă. Ca pietrele, demonii computerului nu vorbesc. Cu toate acestea, chiar și atunci când nu este implicat niciun act explicit de comunicare, software-ul atrage dorința înnăscută a oamenilor de a comunica cu un alt tehnologic – sau, dimpotrivă, teama de imposibilitatea stabilirii unei astfel de comunicări.25 Daemonii, care odată locuiau spațiul de mijloc dintre zei și oameni, sunt astăzi suspendate între utilizator și misterioasa agenție a operațiunilor computerizate, al cărei caracter invizibil contrastează cu efectele prea reale și vizibile pe care le are asupra realității materiale.26 La fel ca fantomele, demonii par nefamiliari, existenți în diferite dimensiuni sau lumi, dar încă capabile să ne facă să simțim un fel de apropiere de ei.

ISTORIA LUNGĂ A ARBOCILOR DIALOG UE (SAU DE CE JOCURILE DIGITALE NU LE PLAC CHATBOT-urile)

Rutinele ascunse, cum ar fi demonii, sunt capabile să stimuleze atribuțiile de agenție. Cu toate acestea, viața socială a inteligenței artificiale devine și mai evidentă atunci când software-ul permite interacțiuni reale între computere și utilizatori. Una dintre aplicațiile în care acest lucru se întâmplă mai sistematic este jocul digital.

În ciuda caracterului lor aparent frivol (sau poate din cauza lui), jocurile digitale au constituit o arenă extraordinară de dezvoltat și

[ 74 ] Media înșelătoare

experimentați cu dimensiunile interactive și comunicative ale IA. Turing a intuit acest lucru atunci când a propus Jocul Imitației sau, chiar mai devreme, când a sugerat șahul ca potențial banc de testare pentru AI. Într-o prelegere la London Mathematica! Societatea în 1947, el a susținut că „mașinii trebuie să i se permită să intre în contact cu ființele umane pentru a se putea adapta la standardele lor. Jocul de șah poate fi mai degrabă potrivit în acest scop, deoarece mișcările adversarului mașinilor vor asigura automat acest contact.”27 Turing era în căutarea ceva care să poată funcționa ca propagandă pentru o disciplină în curs de dezvoltare, iar șahul era un alegere excelentă în acest sens, deoarece ar putea plasa computerele și jucătorii la același nivel într-o competiție provocatoare din punct de vedere intelectual. Dar cuvintele lui Turing indică mai mult decât un interes pentru a demonstra potențialul AI. Dezvoltarea „inteligenței mașinilor” a necesitat căi pentru ca computerul să intre în contact cu ființele umane și să se adapteze la acestea, iar jocurile au fost primele mijloace imaginate de Turing pentru a crea acest contact.

În următoarele decenii, jocurile digitale au îmbunătățit așa-numita simbioză dintre computere și oameni și au contribuit la imersarea sistemelor AI în spații sociale complexe care au alimentat forme de interacțiune între utilizatorii umani și agenții computaționali. joc de luptă spațială dezvoltat în 1962— a implicat provocări doar între jucători umani, personajele controlate de computer au fost introduse treptat într-o serie de jocuri. Una dintre formele de interacțiune care a devenit disponibilă jucătorilor a fost comunicarea în limbaj natural. Pentru a da un exemplu, un jucător al unui joc de aventură - un gen de jocuri digitale care necesită jucătorilor să finalizeze misiuni într-o lume funcțională - poate iniția un dialog cu un hangiu controlat de computer, în speranța de a obține informații utile pentru finalizarea misiunii de joc. .29 Pentru istoria relației dintre IA și comunicarea om-mașină, dialogurile similare cu personaje ñcționale reprezintă un caz extrem de interesant. Nu numai că, de fapt, implică conversații între utilizatori și agenți artificiali, ci și acestea sunt încorporate în mediul funcțional al lumii jocului, cu propriile reguli, narațiuni și structuri sociale.

Cu toate acestea, este interesant, jocurile digitale rareori folosesc același tip de programe conversaționale care alimentează ELIZA și alți chatbot. De obicei se bazează, în schimb, pe o tehnică de programare simplă, dar aparent foarte eficientă – cel puțin în scenariile de joc –: arbori de dialog. În această modalitate de dialog, jucătorii nu tastează direct ceea ce ar trebui spus de personajul pe care îl controlează. În schimb, li se oferă o listă de scripturi predeterminate din care pot alege. Intrarea selectată activează un răspuns adecvat pentru personajul controlat de computer și așa mai departe, până când una dintre opțiunile de dialog alese de jucător aprinde un anumit outome. De exemplu, tu,
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jucătorul, sunt atacați dacă ați selectat linii de dialog care l-au provocat pe interlocutor. Dacă s-ar alege diferite opțiuni, personajul controlat de computer ar putea deveni în schimb un aliat.30

Luați The Secret о f Monkey Island, un joc de aventură graphie din 1990, care a crescut la statutul de clasic în istoria jocurilor digitale. În rolul personajului activ Guybrush Threepwood, trebuie să treci trei încercări pentru a-ți îndeplini visul de a deveni pirat. Prima dintre aceste încercări este un duel cu Sword Master, Caria. Pregătindu-te pentru această provocare, descoperi că lupta cu sabia în lumea Insulei Maimuțelor nu este despre mișcări dibace și tehnică de scrimă. Secretul, în schimb, este să stăpânești arta insultei, să-ți prinzi adversarul cu garda jos. În timpul jocului de sabie, un luptător lansează o insultă de genul „Am avut odată un câine care era mai inteligent decât tine”. Venind cu răspunsul corect („El trebuie să te fi învățat tot ce știi”), câștigi avantajul în luptă. O revenire nepotrivită duce, în schimb, la o poziție de dezavantaj. Pentru a-l învinge pe Sword Master, trebuie să te angajezi în lupte cu alți câțiva pirați, învățând noi insulte și răspunsuri potrivite pentru a fi folosite în lupta finală (fig. 4.1).31

În saga Monkey Island, conversația este concepută ca un adevărat duel între mașină și om. Acest lucru este într-o oarecare măsură similar cu testul Turing, în care programul de calculator câștigă Jocul Imitației, înșelând interogatorul uman, făcându-l să creadă că este un om. Spre deosebire de test, însă, omul din Insula Maimuțelor este cel care preia limbajul computerului, nu computerul care imită limbajul oamenilor. Considerând conversația ca o structură ierarhică

Lupți ca un fermier de lapte.

În curând îmi vei Ье шеагіпд siiiordul meu ca pe un shish kebab! Băiete, ești urât!

Hha ce idiot!

Te cali pirat! Renunț, tu шіп!

Figura 4.1 Duelul de luptă cu sabia în Secretul Insulei Maimuțelor: doar selectând insulta potrivită, jucătorul va putea învinge adversarii. Imagine de la https:// emotionalmultimediaride.wordpress.com/2020/01/27/classic-adventuring-the-secret-of-monkey-island-originalspecial-edition-pc/ (preluat la 7 ianuarie 2020).
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de alegeri discrete, arborii de dialog preiau de fapt logica programării software: sunt echivalente cu arbori de decizie, o modalitate obișnuită de a afișa algoritmi de computer alcătuiți din alegeri condiționale. În „jocul de conversație” de pe Insula Maimuțelor, jucătorul îl învinge pe piratul controlat de computer navigând prin logica simbolică a software-ului: dacă este selectată declarația righi, atunci jucătorul câștigă un avantaj; dacă jucătorul selectează din nou declarația righi, atunci duelul este câștigat.

Arborii de dialog, cu alte cuvinte, vorbesc limbajul programării computerizate, a cărui locuțiune nu transmite doar sens, ci execută și acțiuni care au consecințe reale în lumea materială. acel limbaj natural, atunci când este folosit pentru a opera sarcini pe un computer, poate fi privit doar ca o formă de limbaj de programare de nivel foarte înalt.33 Deși această idee a fost criticată cu anumite motive de către lingviști, echivalența dintre limbajul natural și limbajul de programare se aplică. la cazuri precum arborele de dialog, în care utilizatorul nu trebuie să stăpânească programarea, ci doar își folosește limbajul de zi cu zi ca instrument pentru a interacționa cu computerele.34 În jocurile digitale bazate pe text, cum ar fi ficțiunea interactivă — un gen de jocuri digitale care a apărut încă din anii 1970 — această logică nu se referă doar la dialoguri, deoarece limbajul este principalul instrument de acționare asupra lumii jocului: jucătorul folosește comenzi verbale și interogări pentru a acționa asupra mediului de joc și a controla personajele fictive. De exemplu, un jucător tasta GO SOUTH pentru ca personajul să se miște în acea direcție în lumea fictivă. Ceva similar se aplică asistenților vocali, cu ajutorul cărora utilizatorii pot purta o conversație simplă, dar poate și mai important, pot folosi limbajul pentru a-i determina să efectueze sarcini precum efectuarea unui cali de telefon, stingerea luminii sau accesarea internetului. .

După cum a observat Noah Wardrip-Fruin, cu toate acestea, cel mai remarcabil lucru despre arborii de dialog este „cât de puțină iluzie prezintă, mai ales în comparație cu sisteme precum ELIZA.”35 Nu numai că, de fapt, arborii de dialog sunt încadrați într-o dinamică statică a luarea pe rând, care amintește mai mult de dinamica jocurilor de masă (unde jucătorii fac mișcările pe rând) decât de conversațiile din viața reală. În plus, fiecare personaj poate răspunde doar la un număr limitat de interogări, dialogurile rezultate apărând cel puțin rigide și, în cele mai rele cazuri, prea previzibile. Este surprinzător, și într-un fel fascinant, faptul că un cadru atât de rigid este încă capabil să exercite un efect puternic asupra jucătorilor - așa cum demonstrează succesul persistent al arborilor de dialog, care continuă să fie privilegiat pe scară largă față de chatboții în designul jocului. Savantul în jocuri Jonathan Lessard, care a conceput o serie de jocuri digitale simple experimentând utilizarea chatbot-urilor, a speculat că acest lucru ar putea avea de-a face cu faptul că arborii de dialog permit jocul.
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designeri și companii un grad mai mare de control asupra narațiunii jocului.36 Totuși, deși acest lucru este probabil adevărat, arborii de dialog nu s-ar fi putut dovedi atât de rezistenți decât dacă jucătorii, nu numai designerii, ar aprecia această modalitate de joc.

Din acest punct de vedere pot fi oferite cel puțin două explicații suplimentare. Prima are de-a face cu faptul că credibilitatea unei conversații depinde atât de conținutul comunicării, cât și de contextul acesteia. Programând ELIZA, Joseph Weizenbaum a modelat conversația ca un set de schimburi discrete în care contextul nu a jucat aproape niciun rol. În contrast, arborii de dialog sunt toate despre contexte: fiecare stare conversațională este situată la un punct dat în structura ierarhică a pașilor predeterminați, selecția jucătorului activând o nouă ramură a arborelui de dialog. Acest lucru înseamnă, de asemenea, că este imposibil să mergeți înapoi (deși ar putea fi posibil să reveniți la trunchiul principal al conversației). Prin urmare, în arborii de dialog, conversația se apropie de mecanismul căutării jucătorului: ca orice altă acțiune a jucătorului, fiecare alegere are ca scop progresul în misiunea pe care jucătorul trebuie să o îndeplinească.37 O astfel de continuitate cu mecanismul mai larg al jocurilor bazate pe căutări. ajută la explicarea, cel puțin parțială, de ce arborii de dialog sunt o influență atât de naturală pentru genuri precum jocurile de aventură sau jocurile de rol. La urma urmei, în ficțiunea literară, cititorii găsesc personajele convingătoare și datorită integrării lor în lumi funcționale și în scene specifice în care participă la acțiune și interacționează cu alte persoane funcționale.38 Aceeași dinamică se aplică unui cadru de joc, în care atractivitatea un personaj controlat de computer derivă din faptul că este încorporat în mecanica mai largă a jocului.39

A doua explicație are de-a face cu experiența jocului în sine. Apariția efectelor convingătoare ale personalității în personajele controlate de computer, chiar și în absența interacțiunilor elaborate, mărturisește implicarea profundă pe care jocurile pe computer sunt capabile să inspire jucătorilor.40 De exemplu, caracterul controlat de computer al hoțului a fost cel mai trăsătură binecunoscută a lui Zork, una dintre primele exemple comerciale ale genului de ficțiune interactivă, în ciuda faptului că caracterizarea sa a fost cel puțin superficială: hoțul a interacționat cu jucătorii doar furând obiecte și comori sau atacându-le ocazional41. se datorează faptului că atracția interacțiunilor cu personajele care nu se joacă în jocurile digitale nu depinde prea mult de asemănările superficiale dintre interacțiunile din joc și din viața de zi cu zi și mai mult de cadrul ludic prin care este interpretată interacțiunea.42 După cum sa menționat în capitolul 3, Turkle a descris Efectul Eliza ca formă de mulțumire față de AI: utilizatorii au dezamorsat deficiențele ELIZA punând doar acele întrebări la care a putut să răspundă.43 Jucăușul oferă, conștient sau inconștient, o motivație puternică de a acționa în acest fel și, prin urmare, funcționează ca un intensificator al efect de caracterizare,
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stimulând jucătorii să umple golurile din iluzia descrisă de jocul digital. Trebuie doar să ne uităm la angajamentele fanilor culturii populare cu roboții de caractere care locuiesc în rețelele sociale sau la glumele tachinoase pe care mulți utilizatori le încearcă cu asistenții vocali AI, pentru a realiza cum se întâmplă acest lucru chiar și în afara mediilor de joc.44

Se pare că principala satisfacție a lui Will Crowther, creatorul în anii 1970 al primului joc de ficțiune interactivă bazat pe text, Adventure, a fost să descopere că programul său i-a păcălit pe oameni să creadă că este suficient de inteligent pentru a înțelege și vorbi engleza. După cum a povestit un coleg, „Will a fost foarte mândru – sau mai precis amuzat – de cât de bine putea păcăli oamenii să creadă că în spatele jocului există o IA foarte complexă.”45 Asemănarea acestui comentariu cu reflecțiile lui Weizenbaum despre ELIZA este de remarcată. . Ca și Weizenbaum, Crowther a observat că utilizatorii aveau tendința de a exagera competența sistemelor de calcul relativ simple dacă procesau și generau limbaj natural.46 Acest lucru a indicat ceva asemănător cu decepția remarcată de Weizenbaum la utilizatorii lui ELIZA: o înclinație de a considera chiar și manipularea nesofisticată . a limbajului ca dovadă a „inteligenței” din partea computerelor.

MICROSOFT BOB, SAU NEFERITOAREA ASCENSIRE

A INTERFEȚELOR SOCIALE

În ceea ce privește decepția banală, interacțiunea om-calculator poate fi conceptualizată ca dezvoltarea graduală a instrumentelor de „întâmpinare” către utilizatorii umani, adaptând interfețele computerului la abilitățile perceptive și cognitive ale omenirii.47 Deși acest proces a fost orice altceva decât liniar. évolution, designerii de interfețe au depus eforturi constante pentru a încorpora cunoștințele despre modul în care oamenii primesc, procesează și memorează informațiile pentru a stimula interacțiuni mai eficiente cu computerele. Prin urmare, dezvoltarea sistemelor în rețea a funcționat ca un stimulent pentru designeri să considere că fiecare interacțiune cu un computer este o activitate socială care ar trebui înțeleasă pe fundalul așteptărilor și înțelegerilor sociale. Înțelegerile lumii sociale au fost incluse din ce în ce mai mult ca cadre pentru dezvoltarea interfețelor, în speranța exploatării familiarității cu situațiile sociale din lumea de zi cu zi.48

În acest context, dezvoltarea software-ului bazat pe ΑΙ care procesează limbajul natural a oferit designerilor posibilitatea de a dezvolta interfețe care au intrat literalmente în conversație cu utilizatorii.49 Alexa, Siri și Google Assistant sunt cele mai recente exemple ale acestei abordări, dar
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istoria „interfețelor sociale” sau „agenților de interfață cu utilizatorul” este mult mai lungă.50 La mijlocul anilor 1990, Microsoft, compania lider în sectorul computerelor la acea vreme, a făcut eforturi semnificative pentru a inova în acest domeniu. Primul lor proiect de interfață socială a fost Microsoft Bob, o interfață de utilizator animată bazată pe personaje de desene animate, care a fost introdusă în martie 1995 și a cărei producție a fost întreruptă doar un an mai târziu.

Microsoft Bob a fost, după toate definițiile, un eșec. În cercurile informaticii, a dobândit un statut similar cu cel infamului regizor de film Ed Wood printre cinefili: un exemplu standard de ceva care a mers prost. După cum a spus un jurnalist de tehnologie, „Care este cel mai eficient mod de a ridica în derâdere un produs tehnologic ca fiind un împuțit și/sau un eșec? Easy: Compare it to Microsoft Bob.”51 Anunțat ca o revoluție în ușurința de utilizare și ca întruchipare a noii paradigme a interfețelor sociale, Bob a fost aspru criticat de critici și respins de utilizatori, care l-au considerat condescendent și inutil.52 Totuși. Eșecul sistemului nu îl face un caz mai puțin valoros de explorat. Dimpotrivă, după cum au arătat istoricii științei și tehnologiei, tehnologiile eșuate sunt adesea puncte de intrare ideale pentru examinarea cotizărilor și traiectoriilor critice ale evoluției tehnologice.53 În istoria computerelor personale, Microsoft Bob este un caz destul de interesant: se bazează pe perspective. în științe sociale, o companie importantă a dezvoltat un nou produs care prezenta o viziune imaginativă asupra viitorului designului de interfețe. Eșecul său spectaculos a oferit practicienilor din domeniu o oportunitate de a lua în considerare critic atât beneficiile, cât și provocările interfețelor sociale. Succesul altor interfețe sociale din următoarele două decenii demonstrează, de asemenea, că proiectul Microsoft nu a fost o fundătură, ci un proiect nefast bazat pe unele idei greșite, precum și pe un teren fertil.54

Prezentat într-o perioadă în care compania Microsoft era liderul nediscutat al industriei software, Bob a fost promovat cu multă fanfară ca o descoperire care ar revoluționa computerul acasă. Logo-ul său, o față zâmbitoare cu ochelari grei, figura în articole de marketing care includeau ceasuri sport, șepci de baseball și tricouri.55 Bob era o colecție integrată de aplicații de calcul acasă a căror interfață se baza pe metafora vizuală a unei case cu camere. și conținuturi, prin care utilizatorii puteau accesa aplicații și funcții. Acesta a inclus opt programe interconectate, inclusiv e-mail, un calendar, un carnet de cecuri, o agendă de adrese și un joc de chestionare. Proiectat cu un desen animat, a fost destinat copiilor și utilizatorilor neexperți, în încercarea de a mări baza de utilizatori a computerelor.

Comunicatele de presă ale Microsoft au subliniat că Bob nu arăta ca niciun software tradițional, deoarece utilizatorii trebuiau să interacționeze cu Bob „social”. Acest lucru a fost posibil prin „ghizi personali” care au răspuns la intrări prin intermediul
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baloane de dialog și a oferit utilizatorilor „ajutor activ și inteligent”, precum și „informații de specialitate”. Ghidurile au fost prezentate într-un mediu virtual care simula spații domestice și putea fi personalizat de utilizatori, „decorând” camerele și chiar schimbând peisajul din afara ferestrelor camerelor după gusturile lor.56 Utilizatorii puteau alege dintr-o listă de doisprezece creaturi, implicit un câine numit Rover și alte opțiuni, inclusiv o pisică cu sunet francez, un iepure, o broască țestoasă și un șobolan îmbufnat.57 Ghizii stăteau în colțul ecranului, oferind instrucțiuni și făcând trucuri ocazionale în timp ce utilizatorii foloseau software-ul (ñg. 4.2). Una dintre caracteristicile cu care s-a lăudat Microsoft a fost gradul în care diferiții „ghizi personali” au fost caracterizați de personalități specifice. Când utilizatorului i s-a oferit posibilitatea de a alege un ghid personal, fiecare a fost descris cu atribute care descriu personalitatea sa, de exemplu, „extremurător”, „prietenos” sau „entuziast.”58 Deși experiența cu toți ghizii a fost în adevăr destul de asemănătoare , unele dintre liniile de dialog au fost specifice personalității fiecăruia.

La fel ca metafora spațiului domestic, numele „Bob” a fost pretins ales să sune „familiar, abordabil și prietenos.”59 Reacția recenzenților experți și a jurnaliştilor nu a fost însă deloc prietenoasă. Bob a fost descris ca fiind „o jenă” și criticat pentru ñaws evidente în designul său.60 În camerele virtuale, de exemplu, existau obiecte care dădeau acces la aplicații sau la anumite funcții. Cu toate acestea, alte obiecte erau inutile

Figura 4.2 Captură de ecran cu Microsoft Bob, cu ghidul „Rover the dog” (dreapta jos).

Imagine de pe https://theuijunkie.com/microsoft-bob/, preluată la 24 noiembrie 2019.
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și, când s-a făcut clic pe, a livrat un mesaj în care explică că nu au o funcție anume. Acesta nu a fost un exemplu de design fără întreruperi.61 O altă critică comună a vizat faptul că interfața oferea „management indirect”, ceea ce înseamnă că nu numai că dădea acces la funcții, ci și operațiunile în numele utilizatorului. Acest lucru a fost văzut ca potențial problematic, mai ales pentru că aplicațiile oferite în Microsoft Bob includeau managementul finanțării locuințelor, ceea ce a ridicat întrebarea cine ar fi răspunzător pentru eventualele greșeli.62

Cu toate acestea, motivul principal al eșecului lui Bob a fost că interfața a pățit utilizatorii ca fiind intruzivă. În ciuda faptului că a fost programat în mod explicit pentru a facilita comportamentul social, Bob nu a respectat reguli și convenții sociale importante referitoare la lucruri precum rândurile conversației și spațiul personal. „Ghidurile personali” au întrerupt frecvent navigarea, mesajele de ajutor care au apărut nesolicitate. După cum a spus un recenzent, „Programele lui Bob elimină multe funcții standard, bombardează utilizatorii cu mesaje vorbărete și nu fac neapărat mai ușor de făcut.”63 În plus, tonul didactic al programului și ghidurile sale personale au fost iritante pentru mulți. La scurt timp după lansarea lui Bob, un programator pe nume George Campbell a creat o parodie a lui Bob, cu ajutoarele săi oferindu-le „sfaturi trăgătoare – mai obișnuit despre viață decât despre computere – cum ar fi: „Ascultă pe bătrâni; ați putea ajunge să trăiți la fel de mult.” Sau: Un om însetat nu ar trebui să-și adulmece paharul.”64

Cu toate acestea, pentru toată derizoria pe care a atras-o mai târziu, Bob nu arăta ridicol la acea vreme. Conceptul său își are originea în ceea ce a fost probabil cea mai autoritară abordare din științe sociale a interacțiunii om-calculator dezvoltată în ultimele trei decenii, paradigma Computers Are Social Actors. Clifford Nass și Byron Reeves, ale căror studii au construit bazele acestei abordări, s-au consultat pentru Microsoft și au participat la evenimente legate de lansarea lui Bob.65 În mod faimos, Nass și Reeves susțin că oamenii au aplicat computerelor și altor reguli sociale și așteptări similare celor pe care le-au aplicat. angajați atunci când interacționează cu oamenii în viața lor de zi cu zi.66 Tradusă în complexitatea designului interfeței, cercetările lor au indicat că fiecare componentă a designului interfeței, până la modul în care a fost exprimat un mesaj, a transmis sens social. Posibilitatea de a anticipa și dirija un astfel de sens ar putea fi exploatată de proiectanți pentru a construi interacțiuni mai eficiente și funcționale cu computerele.67

Nass i-a dat lui Bob un sprijin pasional în comunicate de presă și interviuri, subliniind că Bob a fost o dezvoltare naturală a descoperirilor dezvoltate prin propriile cercetări ale lui Nass și Reeves: „cercetarea noastră arată că oamenii se ocupă de computerele lor la nivel social, indiferent de tipul de program sau experiența utilizatorului. Oamenii știu că lucrează cu o mașină, încă
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îi vedem în mod inconștient fiind politicoși cu computerul, aplicând părtiniri sociale și, în multe alte moduri, tratând computerul ca și cum ar fi o persoană. Microsoft Bob explică această interacțiune implicită și, prin urmare, îi permite oamenilor să facă ceea ce oamenii fac cel mai bine, adică să acționeze social.”68 Reeves a fost, de asemenea, citat într-un comunicat de presă, declarând: „Întrebarea pentru Microsoft a fost cum să faci un produs de calcul mai ușor. de folosit și distractiv. Cliff și cu mine am ținut o discuție în decembrie 1992 și am spus că ar trebui să o facă socială și naturală. Am spus că oamenii sunt buni să aibă relații sociale - să vorbească între ei și să interpreteze expresii faciale. Ei sunt, de asemenea, buni în a face față unui mediu natural, cum ar fi mișcarea obiectelor și a oamenilor în camere, așa că dacă o interfață poate interacționa cu utilizatorul pentru a profita de aceste talente umane, atunci s-ar putea să nu aveți nevoie de un manual.”69

Privind la Microsoft Bob alături de teoriile lui Nass și Reeves, face o explorare destul de interesantă a provocării de a aduce împreună teoria cu practica. Pe de o parte sunt realizările spectaculoase ale paradigmei lui Nass și Reeves, care a informat o generație de cercetări, precum și lucrări practice în interacțiunea om-calculator; pe de altă parte, eșecul spectaculos al unei interfețe, Microsoft Bob, care a fost inspirată din aceeași paradigmă. Cum se poate înțelege relația dintre cei doi?

Poate că cheia incapacității Microsoft de a converti cunoștințele lui Nass și Reeves într-un produs de succes se află în declarația lui Nass că Microsoft Bob a reprezentat ambiția de a prelua caracterul social implicit al interacțiunilor dintre oameni și computere și de a-l explicita. Cu toate acestea, în cercetările lui Nass și Reeves, așa cum sunt prezentate în cartea lor revoluționară The Media Equation, publicată la scurt timp după lansarea Microsoft Bob, caracterul social al interacțiunilor cu computerele este implicit și nespus, mai degrabă decât recunoscut sau chiar apreciat de către utilizator. 70 În lucrarea sa ulterioară, Nass a reînnoit paradigma Computers Are Social Actors prin noțiunea de „comportament fără minte”. Prin noțiunea de lipsă de minte, extrasă din științele cognitive, el și colaboratorul său Youngme Moon au subliniat că utilizatorii tratează computerele ca actori sociali, în ciuda faptului că știu prea bine că computerele nu sunt oameni. Convențiile sociale derivate din interacțiunea om-uman sunt astfel aplicate fără minte, „ignorând elementele care dezvăluie natura asocială esențială a unui computer.”71

Prin urmare, în lucrarea teoretică a lui Nass și Reeves, socialitatea computerelor nu este intenționată să fie explicită și constrictivă, așa cum a fost cazul în Microsoft Bob. Intruzivitatea lui Bob, în acest sens, ar fi putut perturba natura lipsită de minte a relațiilor sociale imaginative dintre oameni și mașini. Pentru a rămâne mai strict în limitele istoriei lui
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interacțiunea om-calculator, s-ar putea spune că socialitatea „explicită” a lui Bob a fost o încălcare flagrantă a logicii calculului transparent.72 La Microsoft, proiectul Bob a apărut din aceeași echipă care a dezvoltat anterior un alt pachet software, Microsoft Publisher. , care este încă în uz astăzi. Introdusă în 1991, Publisher a fost prima aplicație Microsoft care a folosit vrăjitori care conduceau utilizatorii prin sarcini complicate pas cu pas. Designerii Microsoft Publisher au considerat interfața socială a lui Microsoft Bob ca un pas logic către obiectivul de a face software-ul mai accesibil pentru începători într-un moment în care majoritatea gospodăriilor încă nu aveau un computer personal.73 Cu toate acestea, extinderea abordării didactice a lui Publisher. vrăjitorii pentru un întreg set de aplicații a fost problematic. În timp ce vrăjitorii intervin atunci când sunt necesare anumite operațiuni, ghizii personali ai lui Bob și-au afirmat constant prezența, neavând capacitatea de a dispărea în liniște pe fundal. Ghidurile le-au cerut utilizatorilor să-i ia în serios ca agenți sociali, refuzând să accepte jocul subtil dintre ascunderea și dezvăluirea, apariția și dispariția, pe care îl navighează alte interfețe de computer.74 Dacă o interfață construiește întotdeauna într-o oarecare măsură o iluzie, așa cum a lui Nass și Reeves. ideile au fost implementate l-au transformat pe Bob într-o interfață în care iluzia nu a fost niciodată ascunsă, ci întotdeauna făcută manifestă utilizatorului.75

PENTRU O CENALOCIE A ALEXEI

Căutând pe YouTube videoclipuri despre Alexa, se găsesc un număr mare de videoclipuri făcute în casă cu utilizatorii care se angajează în conversații cu „ber”. Un subgen adevărat printre acestea sunt videoclipurile care se joacă în glumă cu răspunsuri ciudate sau comice returnate de Alexa la anumite intrări. Unii, de exemplu, sugerează celebra scenă din Războiul Stelelor în care Darth Vader îi spune tânărului erou Luke Skywalker „Eu sunt tatăl tău”. În clipurile de pe YouTube, Alexa răspunde utilizatorilor cu aceeași linie, cu siguranță scrisă de dezvoltatorii Amazon: „Nuuuuuuuuu! Nu este adevărat, e imposibil.”76

În ciuda rezistenței Alexa de a accepta paternitatea utilizatorilor săi, Alexa, Siri, Asistentul Google și alți asistenți vocali contemporani au nu unul, ci mulți „părți” și „mame”. Acest capitol a urmărit trei fire cruciale care fac parte din această poveste: demoni, jocuri digitale și interfețe sociale. Istoriile AI sunt de obicei mai conservatoare în definirea precedentelor sistemelor de comunicare AI de astăzi, cum ar fi asistenții vocali. În termeni tehnici, software-ul lor este rezultatul unei evoluții de lungă durată în cel puțin două domenii principale din AI: procesarea limbajului natural și recunoașterea și producția automată a vorbirii. Pe de o parte, procesarea limbajului naturai dezvoltă programe care analizează și procesează uman
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limbaj, de la chatbot la traducerea limbii, de la interpretarea vorbirii la generarea de text.77 Pe de altă parte, recunoașterea și producția automată a vorbirii dezvoltă aplicații informatice care procesează limbajul vorbit astfel încât să poată fi analizat și reprodus de computere. Genealogia asistenților vocali este, totuși, mult mai complexă. Deoarece, așa cum ne-a învățat Lucy Suchman, fiecare formă de interacțiune om-calculator este situată social, această genealogie implică, de asemenea, aplicații software practice și banale prin care AI sa dezvoltat în obiecte tehnice, sociale și culturale.78

Fiecare dintre cele trei cazuri examinate în acest capitol oferă puncte de intrare alternative pentru interogarea mecanismelor subtile și ambivalente prin care agenția socială este proiectată asupra IA. Obscuri și ascunse prin definiție, demonii computerului mărturisesc dinamica prin care acțiunea autonomă duce la atribuții de agenție și umanitate. În ciuda caracterului de rutină al operațiunilor efectuate de demoni, numele lor și „biografia” reprezentărilor lor ajută la localizarea mașinilor de calcul într-o zonă ambiguă între cei vii și cei neînsuflețiți.

Rolul jocurilor digitale în evoluția AI a fost adesea trecut cu vederea. Cu toate acestea, caracterul jucăuș al jocurilor a permis explorarea sigură și imaginativă a noilor forme de interacțiuni și interacțiuni cu computerele, inclusiv dialoguri cu agenți AI și personaje controlate de computer. Ca și în jocurile digitale, interacțiunile moderne cu asistenții vocali provoacă și stimulează angajamente jucăușe prin care granițele dintre om și mașină sunt explorate în siguranță și fără riscuri. Examinarea utilizărilor arborilor de dialog ajută la aprecierea rolului jocului în interacțiunea cu IA comunicativă, unde o parte a plăcerii vine din căderea în iluzia de a întreține o conversație credibilă cu agenți non-umani.

Figura 4.3 Conversația autorului cu Siri, 12 decembrie 2019.
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În cele din urmă, cazul unui experiment eșuat cu interfețe sociale, Microsoft Bob, oferă teren de reflecție asupra a ceea ce face interfețele bazate pe inteligență artificială o prezență neamenințătoare în mediile noastre domestice și în viața de zi cu zi. Încercările Microsoft de a explicita socialitatea interacțiunilor noastre cu computerele din spate, deoarece ghidurile personale ale lui Bob erau percepute ca intruzive și enervante. Acest lucru contrastează cu comportamentul rezervat al interfețelor vocale de astăzi, care rămân în tăcere și (aparent) inactive în fundal până când cuvântul trezire le calmează la viață (ñg. 4.3):
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CAPITOLUL 5

Cum se creează un bot

Programare Deception la Loebner

Concurs de premii

Antreprenorul american Hugh Loebner a fost din toate punctele de vedere un personaj controversat. Deținător a șase brevete și proprietar al Crown Industries, un producător de echipamente de teatru, el a făcut titluri cu opiniile sale vocale în favoarea prostituției, precum și rolul pe care și l-a adaptat în căutarea AI. La sfârșitul anilor 1980, Loebner a devenit entuziasmat de ideea că testul Turing ar trebui transformat într-un concurs real și, în cele din urmă, a decis să finanțeze el însuși o astfel de întreprindere. El a colaborat cu Robert Epstein, psiholog cognitiv și director al Centrului Cambridge pentru Studii Comportamentale, pentru a-și aduce visul în realitate. Prima ediție a concursului, numită Premiul Loebner, a fost organizată în 1991. De atunci, concursul se desfășoară în fiecare an în mai multe locații din lume, din Regatul Unit până în Australia, de la apartamentul propriu al lui Loebner din New York până la facilități în care Alan Turing a lucrat în timpul celui de-al Doilea Război Mondial pentru a sparge mesajele naziste cifrate la Bletchley Park.

În conformitate cu Loebner, personajul public, Premiul Loebner a fost, de asemenea, foarte controversat. În timp ce susținătorii săi l-au descris cu entuziasm ca parte a „căutării mașinii de gândire”, mulți au criticat aspru concursul, argumentând că nu oferă un cadru adecvat pentru evaluarea realizărilor tehnologiilor AI de ultimă oră.1 Criticii subliniază faptul că concursul măsoară doar competențele lingvistice într-un cadru de conversație, care este doar o nișă în domeniul larg al
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aplicații AI și că, chiar și în acest domeniu specific, concursul nu reflectă cele mai avansate tehnologii.2 Ei observă că concursul nu îmbunătățește înțelegerea disciplinei, ci, dimpotrivă, creează hype și susține opinii înșelătoare despre ceea ce înseamnă de fapt AI.3 În mod persuasiv, ei susțin, de asemenea, că ceea ce face ca programele de calculator să aibă succes la Premiul Loebner este în mare măsură capacitatea lor de a recurge la falibilitatea umană, de a găsi trucuri și comenzi rapide pentru a obține rezultatul dorit: păcălirea oamenilor făcându-le să creadă că un bot este uman.4

Deși sunt de acord cu astfel de critici, cred, de asemenea, că, în mod paradoxal, tocmai motivele pentru care Premiul Loebner are o relevanță mică ca evaluare a competenței tehnice îl fac un caz extrem de productiv pentru înțelegerea AI dintr-o perspectivă diferită. După cum am arătat, atunci când sistemele AI intră în interacțiuni cu oamenii, nu pot fi separate de spațiile sociale pe care le împărtășesc cu interlocutorii lor. Oamenii trebuie să fie incluși în ecuație: IA comunicativă poate fi înțeleasă doar luând în considerare aspecte precum modul în care oamenii percep și reacționează la comportamentul AI. În acest sens, Premiul Loebner oferă un cadru extraordinar în care răspunderea oamenilor pentru înșelăciune și implicațiile acesteia pentru IA sunt puse la încercare și reflectate asupra lor. Acest capitol analizează istoria acestei competiții pentru a argumenta că a funcționat ca un teren de probă pentru capacitatea AI de a înșela oamenii, precum și o formă de spectacol care evidențiază potențialul, dar și contradicțiile tehnologiilor de calcul. Deși premiul nu a oferit nicio evaluare definitivă sau chiar validă din punct de vedere științific a IA, interacțiunile juriului cu oamenii și programele pe parcursul celor aproape treizeci de ani de competiție reprezintă o arhivă de neprețuit. Ele ilustrează modul în care roboții conversaționali pot fi programați pentru a păcăli oamenii și modul în care oamenii răspund la strategiile programatorilor pentru decepție.

ON CU SPECTACALA: REALIZATI TESTUL TURING

Inițial nu a fost menit să fie adevărat. În 1950, când Turing și-a propus testul, l-a conceput ca un experiment de gândire, o provocare care să-i facă pe oameni să realizeze potențialul computerului. În următoarele decenii, propunerile sale au stimulat discuții teoretice aprinse în domenii precum psihologia, informatica și filosofia minții, dar s-au depus puține eforturi pentru a o aduce în performanță reală. De ce, la începutul anilor 1990, cineva a decis să organizeze un concurs public propriu-zis pe baza testului Turing?

Este tentant să răspundem la această întrebare indicând progresul tehnologic. Acest lucru ar însemna să presupunem că la începutul anilor 1990 AI a avut în sfârșit
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a atins un astfel de nivel de sofisticare și de pricepere încât a meritat să-l supună testului Turing. Această ipoteză este însă doar parțial convingătoare. Deși noile generații de programe de procesare a limbajului natural au dat roade teoria gramaticii generative, agenții conversaționali precum chatboții nu au evoluat dramatic de pe vremea lui ELIZA și PARRY.5 De fapt, nici organizatorii primului concurs Loebner Prize nu au evoluat dramatic. așteaptă-te ca computerele să ajungă oriunde până la trecerea testului Turing.6 În plus, performanța lor reală nu a demonstrat cu greu progrese tehnice clare. După cum au remarcat mai mulți comentatori, concurenții au continuat să folosească multe dintre tehnicile și trucurile inițiate de programul ELIZA, dezvoltat cu aproape treizeci de ani mai devreme.7

Ceea ce a condus la organizarea concursului pentru Premiul Loebner nu au fost probabil factori tehnici, ci mai ales culturali.8 Când Epstein și Loebner au făcut echipă pentru a transforma experimentul de gândire al lui Turing într-un concurs real, creșterea computerelor personale și a internetului creaseră condiții ideale pentru transport scoate un astfel de efort. Oamenii erau acum obișnuiți cu mașinile de calcul și tehnologiile digitale, iar chiar și chatbot-urile și personajele AI nu erau necunoscute utilizatorilor de internet și jucătorilor de jocuri digitale. După aproximativ două decenii de deziluzie și „Al Winter”, a fost creat un teren fertil pentru reînnoirea mitului mașinilor de gândire. Climatul de entuziasm pentru calculatoare a presupus apariția unei narațiuni puternice în jurul ideii de „revoluție digitală”, cu ajutorul unor promotori entuziaști, precum Nicholas Negroponte, fondatorul MIT Media Lab în 1985, și amplificatoarelor, precum populara revista Wired, care a debutat în 1993.9

Ca parte a acestui climat, computerele s-au mutat în centrul scenei nu doar a Premiului Loebner, ci și a mai multor competiții între oameni și mașini. De la șah la concursuri populare, anii 1990 au văzut programe de calculator luptă împotriva oamenilor în concursuri publice care au atras atenția publicului și a presei.10 Nu a fost o coincidență, în acest sens, faptul că Epstein a fost un popularizator priceput al științei, iar Loebner proprietar al unui ñrm specializat în echipament de teatru. Premiul Loebner a fost în primul rând o chestiune de comunicare publică și performanță; după cum a spus Margaret Boden, „mai multă publicitate decât știință.”11 Acest lucru nu a fost complet în contradicție cu intențiile lui Turing însuși: după cum s-a menționat în capitolul 1, Turing și-a propus de fapt propunerea inițială a testului să fie o formă. de „propagande” pentru a ridica statutul noilor calculatoare digitale.12 Este pe deplin potrivit, în acest sens, ca Premiul Loebner să fi vizat în primul rând atragerea publicului și doar în al doilea rând ca o contribuție la știință.

Prima competiție pentru Premiul Loebner a fost găzduită pe 8 noiembrie 1991, de Muzeul Computerului din Boston. Oliver Strimpel, al muzeului
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director executiv, a explicat pentru New York Times că evenimentul a îndeplinit unul dintre obiectivele cheie ale muzeului: „să răspundă la „și ce?” – pentru a ajuta la explicarea impactului computerului asupra societății moderne.” De asemenea, a recunoscut în mod explicit continuitatea dintre Premiul Loebner și alte concursuri de inteligență artificială, menționând că muzeul speră să organizeze o altă „confruntare între om și mașină”: un meci între maestrul de șah din lume și cel mai avansat computer de joc de șah. 13

Din cauza neclarității propunerii lui Turing, comitetul care a pregătit evenimentul a trebuit să decidă cum să interpreteze și să pună în aplicare testul său. Ei au convenit că judecătorii vor clasifica fiecare participant (fie un computer, fie un om) în funcție de cât de uman au fost schimburile. Dacă rangul median al unui computer a egalat sau a depășit rangul median al unui participant uman, acel computer a trecut această variantă a testului Turing. În plus, judecătorii ar specifica dacă cred că fiecare terminal este controlat de un om sau de un computer. Judecătorii urmau să fie aleși în rândul publicului larg, la fel și „confederații”, adică oamenii care aveau să se angajeze în conversații oarbe cu judecătorii alături de programele computerizate.

O altă regulă importantă a vizat subiectul de conversație: sfera testului a fost limitată la o anumită temă, care urma să fie aleasă de fiecare concurent. Epstein a recunoscut că această regulă, care s-a schimbat în 1995, când discuțiile au devenit nerestricționate, a fost menită „să protejeze computerele” care erau „prea inepte în acest moment pentru a păcăli pe cineva pentru foarte mult timp.”14 Alte reglementări au fost, de asemenea, concepute pentru calculatoare. avantaj: judecătorii, de exemplu, au fost solicitați printr-un anunț de angajare în ziar și verificați pentru că aveau puține sau deloc cunoștințe de informatică, ceea ce a sporit șansele programelor chatbot-ilor.15

Pentru un concurs care vizează măsurarea progresului AI, pare ciudat că reglementări specifice au fost menite să faciliteze activitatea programelor, punând în pericol imparțialitatea procedurilor. Totuși, această alegere este rezonabilă dacă recunoaștem că concursul pentru Premiul Loebner nu este atât cercetare științifică, cât o formă de spectacol. Așa cum organizatorii unui eveniment sportiv au nevoie de atleți pentru a fi în cea mai bună formă pentru a concura, comitetul de premiu are nevoie de computere pentru a fi concurenți puternici în jocul lor - din cauza deciziei de a le ușura sarcina.16 Nevoia de a spori spectacularismul competiției. explică, de asemenea, decizia de a acorda o medalie de bronz și un premiu în bani în fiecare an programului de calculator care, potrivit arbitrilor, a demonstrat cel mai „umane” comportament conversațional — chiar dacă programul nu a trecut testul Turing. Medalia de bronz a fost intenționată nu doar ca o motivație pentru participanți, ci și ca o concesie suplimentară la caracterul spectaculos al evenimentului: prezența unui câștigător, de fapt,
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ñts cadrul familiar prin care competițiile publice sunt prezentate jurnaliștilor și publicului.17

Există o tradiție îndelungată de a expune publicului minuni științifice și tehnologice. În istoria computerului, duelurile publice cu mașini și oameni, cum ar fi competițiile de șah între campioni umani și programe de calculator, au transformat adesea operațiunile obișnuite și invizibile ale mașinilor într-un spectacol senzațional.18 Jucătorul de șah automat care a uimit observatorii în secolul al XVIII-lea. și secolul al XIX-lea a exploatat, de asemenea, atractivitatea mașinilor care luptă împotriva oamenilor în ceea ce Mark Sussman a numit „dramaturgia tehnologiei care induce credința”. audiență în direct. Un moderator s-a plimbat prin auditoriu cu un microfon fără fir, intervievând câțiva dintre concurenți și comentând despre chatbot-urile lor concurente, în timp ce publicul putea urmări conversațiile pe ecranul terminais. Cadrul spectaculos al evenimentului reverberează în rapoartele care descriu prima competiție drept „mare distracție” și o „extravaganță”.20

O atenție substanțială a fost acordată promovării premiului în presă. Data a fost anticipată de o campanie de presă robustă, cu articole publicate în unele dintre cele mai citite ziare de pe ambele maluri ale Atlanticului.21 Necesitatea de a face concursul ușor de înțeles de către jurnaliști a fost menționată printre criteriile care au orientat comisia în luarea deciziei regulamentele.22 După cum a raportat unul dintre arbitri, informaticianul de la Universitatea Harvard Stuart Shieber, „timpul pe care fiecare judecător a trebuit să converseze cu fiecare agent a fost scurtat de la aproximativ cincisprezece minute la aproximativ șapte pentru a se potrivi cu termenele limită ale presei. ”23 După eveniment, doar în New York Times au apărut trei articole, inclusiv un articol de pe prima pagină a doua zi după concurs, iar Epstein s-a lăudat că câștigătorul a primit echivalentul a un milion de dolari în publicitate gratuită grație acoperirii presei. a evenimentului.24

Circulația și diseminarea narațiunilor despre tehnologie în sfera publică tind să urmeze tipare recurente, bazându-se pe repetiția care modelează însăși capacitatea acestor narațiuni de a deveni populare și răspândite.25 Acest proces a fost descris în termeni laturieni ca o „pasteurizare” a narațiunilor. narațiune, prin care elementele care nu se încadrează în narațiunea dominantă sunt eliminate astfel încât să se privilegieze o narațiune mai coerentă și mai stabilă, exact ca germenii care sunt eliminați în procesele de pasteurizare a alimentelor. pentru a identifica scenariul recurent prin care a fost povestit evenimentul. Narațiunea a postulat că, chiar dacă niciun computer nu ar fi fost capabil să treacă testul Turing, au putut fi observate succese încurajatoare care sugerau o potențială
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viitor în care computerele vor trece testul și vor deveni imposibil de distins de oameni.27 Acest scenariu se potrivea cu narațiunea generală a mitului AI, care, încă din primii ani, a indicat că realizări promițătoare, dacă parțiale ale IA să imagineze un viitor în care la nivel uman AI ar fi atins, schimbând însăși definiția umanității și a lumii sociale.28 Narațiunea opusă, conform căreia IA era o fraudă, a apărut și în rapoartele mai critice ale premiului. Astfel, acoperirea premiului a atras și a perpetuat dualismul de lungă durată dintre entuziasm și critică care a caracterizat întreaga istorie a IA.29

În schimb, implicațiile mai ambigue ale procedurilor premiului care nu se potriveau cu controversa clasică AI au fost rareori, sau vreodată, discutate în rapoartele publice. Accentul s-a pus pe computere: ce erau capabili să facă și în ce măsură puteau fi considerate „inteligente”. Mult mai puțină atenție a fost acordată oamenilor care au participat la proces. Acest lucru este regretabil pentru că, așa cum se arată în capitolul 1, testul Turing este atât de mult despre oameni cât și despre computere. Cu toate acestea, doar câteva piese din ziare au menționat că nu numai computerele au fost schimbate cu oameni la concurs: oamenii au fost adesea schimbati și pentru computere. De exemplu, în prima competiție, confederatul care i-a impresionat pe judecători ca fiind „cel mai uman dintre toți concurenții [umani]” a fost considerat încă un computer de până la doi judecători.30 Acest model a continuat în anii următori, persuadând comitetul premiului să atribuie în fiecare an un premiu nominal confederatului considerat „cel mai uman om.”31

Dacă faptul că judecătorii ar putea lupta să recunoască umanitatea confederaților pare contraintuitiv, ar trebui să ne amintim că nu toate cazurile de comunicare umană se conformează ideilor larg răspândite despre ceea ce contează drept „uman”. Gândiți-vă, de exemplu, la interacțiunile foarte formalizate, cum ar fi schimburile cu un operator de telefonie sau la mișcările standardizate ale telegrafiștilor, ale căror acțiuni au fost ulterior automatizate prin mecanizare.32 Chiar și în viața de zi cu zi, nu este neobișnuit să descriem o persoană care repetă aceleași propoziții sau nu transmite emoție prin limbaj ca acționând sau vorbind „ca o mașinărie”. Pentru a da un exemplu recent, unul dintre momentele în care a devenit evident că campania de selecție din 2017 nu a mers bine pentru premierul britanic Theresa May a fost atunci când ziarele și utilizatorii de pe rețelele sociale au început să se refere la ea drept „Maybot”. Asamanând-o cu un bot, jurnalistii si publicul i-au sanctionat stilul de comunicare plictisitor si repetitiv si lipsa de spontaneitate in aparitiile ei publice.33

Sentimentul că unele comunicări sunt „mecanice” este amplificat în contexte în care schimburile sunt limitate sau foarte formalizate. Majoritatea schimburilor dintre clienți și o casieră dintr-un supermarket mare sunt
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repetitivă și de aceea această meserie a fost mecanizată mai rapid și mai eficient decât, să zicem, ședințele de psihoterapie. Cu toate acestea, conversația dintre un casier și un client iese uneori din registrul obișnuit – de exemplu, dacă se fac schimb de glume sau dacă cineva își împărtășește experiențele personale cu un produs. Acestea sunt tipurile de conversații care sunt percepute ca fiind mai „umane” – deci, cele pe care atât un computer, cât și un confederat ar trebui să le urmărească pentru a-i convinge pe judecători că sunt în carne și oase.34

Una dintre consecințele acestui fapt este că în limitele stricte ale competiției Premiul Loebner, oamenii și computerele sunt de fapt interschimbabile. Dar acest lucru nu se datorează faptului că computerele „sunt” sau „se comportă” ca oamenii. Este, mai subtil, pentru că în situația restrânsă a unei conversații scrise de șapte minute prin intermediul ecranului computerului, jocul cu competență a Jocului de imitație este cheia pentru a trece drept om.

Brian Christian, care a participat în calitate de confederat la concursul Loebner Prize 2009 și a scris o carte atentă despre experiență, organizatorii i-au spus să fie „doar el însuși”. Cu toate acestea, într-adevăr, confederații, pentru a-i da pe judecători drept oameni, nu ar trebui să fie doar ei înșiși: ei trebuie să opteze pentru modele de conversație care să-i pară pe judecători ca fiind mai „oameni”. Christian, așadar, a decis să ignore sfaturile organizatorilor. Pentru a stabili o strategie eficientă, el s-a întrebat ce dinamică ar fi putut informa deciziile judecătorilor. Cum apare o persoană „umană” în contextul testului Turing? Ce strategii ar trebui să fie adoptate de un confederat sau codificate într-un computer pentru a maximiza șansele de a trece drept om? Pentru a răspunde la astfel de întrebări, Christian nu a studiat doar stenogramele competițiilor anterioare ale Premiului Loebner, ci și a reflectat asupra comportamentelor sancționate ca fiind „mecanice” de către oameni și, dimpotrivă, ce comportamente sunt percepute ca fiind mai autentice și mai „umane”. El a continuat să câștige premiul în 2009 ca „cel mai uman om”, adică confederatul care fusese considerat cel mai credibil de către judecători.35 Cu pregătirea adecvată, devenise cel mai bun jucător al Jocului Imitației.

De asemenea, judecătorii pentru Premiul Loebner au venit cu câteva tehnici de dever pentru a-și îndeplini rolurile mai eficient. Unii, de exemplu, au bolborosit în mod intenționat și au scris greșit cuvinte sau au pus aceleași întrebări de mai multe ori pentru a vedea dacă cel care cunoaște ar putea face față repetății, așa cum o fac oamenii în mod obișnuit.36 Cu toate acestea, astfel de trucuri ar funcționa doar până când un programator inteligent ar fi spus. le-a scos și a adăugat linii de cod adecvate pentru a le contracara. Nu spre deosebire de confederații și arbitrii, de fapt, programele și-au dezvoltat propriile strategii pentru a face din mașinile lor cei mai pricepuți concurenți la premiu.
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CODINC INSALA

Comentând rezultatul primei competiții pentru Premiul Loebner din 1991, Epstein nu a fost pe deplin convins de câștigător, Joseph Weintraub, și de terapeutul său pe chatbot. Programul, în ciuda faptului că nu a trecut de testul Turing, a depășit în mod clar toți concurenții. Problema a fost, totuși, felul în care a ajuns la acest rezultat. „Din păcate”, a subliniat Epstein, „s-ar putea să fi câștigat din motive greșite.”37 Arma sa secretă a fost alegerea subiectului de conversație „Conversație capricioasă”. În mod coerent cu acest scenariu, PC Therapist a simulat un tip foarte particular de persoană: bufonul. Aceasta s-a dovedit a fi o mișcare genială și ñve din cei zece judecători l-au clasificat drept om, în ciuda faptului că programul a arătat un comportament destul de neregulat. Deoarece chiar și răspunsuri impenetrabile și irelevante puteau fi așteptate de la un bufon, acest lucru a părut total logic unor judecători. După cum a comentat Stuart Shieber, „Strategia lui Weintraub a fost o eschivare inteligentă a regulilor competiției. Găsise o portiță și o exploatase elegant. Eu unul cred că, făcând acest lucru, a meritat din toată inima să câștige.”38

Weintraub nu a fost singurul șmecher. Dezvoltatorii de chatbot, de fapt, au înțeles de la început că, pentru a trece testul Turing, un computer nu trebuie să fie „inteligent”: trebuia doar să falsească inteligența. După cum a remarcat Turkle, majoritatea eforturilor de a dezvolta un program de calculator care a trecut testul Turing „s-au concentrat pe scrierea unui program care folosește „trucuri” pentru a părea uman, mai degrabă decât pe încercarea de a modela inteligența umană.”39 Dezvoltatorii, de exemplu, și-au dat seama. că un program era mai credibil dacă imita nu numai abilitățile și abilitățile oamenilor, ci și deficiențele acestora. Un bun exemplu este timpul pe care trebuie să-l ia un computer pentru a răspunde la intrarea unui utilizator. Datorită puterii de calcul a mașinilor modem, un chatbot de ultimă generație poate răspunde într-o fracțiune de secundă. În teorie, răspunsul la întrebări atât de rapid ar trebui privit ca o dovadă a priceperii și, prin urmare, a „inteligenței”. Cu toate acestea, deoarece o astfel de viteză este imposibilă pentru oameni, chatboții sunt adesea programați să ia mai mult timp decât au nevoie pentru răspunsurile lor. Prin urmare, programatorii au calculat cât timp îi iau oamenii în medie pentru a scrie cuvinte pe o tastatură și și-au programat chatbot-urile în consecință.40

Un alt exemplu sunt greșelile de ortografie. Deoarece oamenii greșesc adesea, acestea sunt, de asemenea, percepute ca dovezi ale umanității. Un concurent de calculator poate fi astfel mai credibil dacă face o greșeală de tipar ocazională sau arată o oarecare inconsecvență în scris.41 Aceasta este ironie dacă se consideră că concursul Premiul Loebner promite să compenseze cele mai pricepute programe. De fapt, în pregătirea pentru competiția din 1991, comitetul de premii a fost „obsedat de luni de zile” de întrebarea dacă ar trebui sau nu
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permite participanților să simuleze problemele de tastare umane și dacă mesajele ar trebui trimise în rafală sau în modul caracter cu caracter. Decizia lor a fost în cele din urmă să lase toate posibilitățile deschise concurenților, astfel încât această variabilă să devină parte integrantă a „smecherilor” exploatate de programatori.42

Trucurile comune includ recunoașterea ignoranței, întrebarea „De ce întrebați asta?” pentru a abate de la un subiect de conversație sau a folosi umorul pentru a face programul să pară mai autentic.43 Unii, cum ar fi echipa care a câștigat competiția din 1997 cu chatbot-ul CONVERSE, au afirmat că comentarea știrilor recente ar fi considerată de către judecători ca fiind pozitivă. indicii de autenticitate.44 Multe strategii elaborate de programatori la concurs s-au bazat pe acumulări de cunoștințe despre ceea ce a informat evaluarea judecătorilor. Concurentul Jason Hutchens, de exemplu, a explicat într-un raport intitulat „Cum să treci testul Turing prin trișare” că a examinat jurnalele competițiilor anterioare pentru a identifica o serie de întrebări probabile pe care judecătorii le-ar pune. El și-a dat seama, de exemplu, că un chatbot credibil nu ar trebui să se repete niciodată, deoarece acesta fusese cel mai mare cadou în competițiile anterioare.45

Amploarea trucurilor adoptate de programatori pentru a câștiga Premiul Loebner se explică ușor prin faptul că concursul nu permite pur și simplu decepția, ci este organizat în jurul lui. Fiecare interacțiune este modelată de obiectivul de a păcăli pe cineva: programele de calculator sunt create pentru a-i face pe judecători să creadă că sunt oameni, judecătorii își selectează întrebările pentru a-i dezminți, confederații își folosesc propriile strategii pentru a se face recunoscuți ca oameni. În acest sens, pentru a reveni la o comparație făcută în capitolul 1, competiția pentru Premiul Loebner arată ca o ședință spiritualistă în care un medium fraudulos folosește șmecheria pentru a înșela pe ședinți, în timp ce scepticii își desfășoară propriile trucuri și trucuri pentru a demasca înșelăciunea mediumului. 46 Această configurație contrastează cu condițiile cercetării științifice: după cum a subliniat Hugo Münsterberg, un psiholog al percepției și teoreticianul timpuriu al hlm-ului, „dacă ar exista un profesor de știință care, lucrând cu studenții săi, ar trebui să se teamă de crearea lor. Practici glume sau jucându-i feste, el ar fi complet pierdut.”47 Dar această configurație diferă și de majoritatea formelor de interacțiune om-calculator. În timp ce arbitrii Premiului Loebner se așteaptă ca partenerii lor de conversație să fie computere construite pentru a simula oamenii, în multe platforme de pe web, așteptarea implicită este ca toată lumea să fie om.48

Acest lucru nu înseamnă, totuși, că formele de decepție similare cu cele observate la concursul Premiul Loebner nu sunt relevante pentru alte contexte ale comunicării om-mașină. Istoria computerului este plină de exemple de chatboți care, la fel ca câștigătorul premiului Loebner inaugural, au fost programați pentru a prezenta lucruri imprevizibile sau chiar patologice.
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personalități. Un chatbot dezvoltat în 1987 de Mark Humphrys, student la University College din Dublin, a reușit, de exemplu, „din cauza blasfemiei, a agresiunii necruțătoare, a întrebărilor neplăcute despre utilizator” și a afirmațiilor că utilizatorii au fost mincinoși atunci când au răspuns. Chatbot-ul lui Humphrys a fost creat ca o versiune a ELIZA, dar, spre deosebire de creația lui Weizenbaum, nu a fost conceput pentru a fi simpatic, ci „pentru a avea o dispoziție imprevizibilă (și ușor înfricoșătoare)”.49 De exemplu, ca răspuns la orice afirmație inofensivă care începe cu „Tu sunt ... (y)”, a răspuns chatbot-ul cu una dintre aceste rânduri:

(nu sunt (tu) persoana care insulta)

(da, am fost (y) odată)

(ok, deci sunt (y) deci ce este o crima)

(Știu că sunt (tu) nu o frec)

(ma bucur ca sunt (y))

(cântă dacă ești fericit să fii (y) cântă dacă ești fericit așa, hei)

(deci crezi că sunt (y) bine, sincer, nu mi-ar păsa mai puțin)50

Când Humphrys a numit programul MGonz și l-a pus online pe Internetul preweb în 1989, a fost adăugat un element de surpriză: spre deosebire de scenariul Premiului Loebner, majoritatea utilizatorilor nu se așteptau să poată discuta cu un agent de computer. Acest lucru a făcut mai probabil ca utilizatorii să creadă că vorbesc cu un om.

În acest sens, Premiul Loebner este o reamintire a faptului că comunicarea mediată de computer este un spațiu deschis în esență decepției. Una dintre caracteristicile mediilor online este jocul complex de identitate pe care îl permit avatarurile, anonimatul și pseudonimele. După cum susține Turkle, „deși unii oameni cred că a se reprezenta ca altul decât unul este întotdeauna o înșelăciune, mulți oameni apelează la viața online cu intenția de a o juca exact în acest fel.”51 Experiența lui MGonz în era preweb, de asemenea, a pus în prim plan creșterea mai recentă a abuzului și trolling-ului online. Jurnalistul lan Leslie s-a referit recent la MGonz când a propus că Donald Trump ar putea fi primul președinte de chatbot, deoarece „unii dintre cei mai eficienți chatbot-i își ascund înțelegerea limitată cu o agresiune fără sens și fără context.”52

Punctele de continuitate dintre concursul Loebner Prize și spațiile online rezonează într-un episod de ironie care îl implică pe Epstein. El a fost el însuși victima unei curioase înșelătorie online când a purtat o corespondență prin e-mail luni de zile cu ceea ce credea că este o rusoaică. S-a dovedit a fi un bot care a folosit trucuri similare cu cele ale concurenților la Premiul Loebner, ascunzându-și imperfecțiunile în spatele identității unui străin care vorbea engleza ca a doua limbă.53 După cum a subliniat Florian Muhle, „cel mai de succes computer conversațional programele din aceste zile

[ 96 ] Media înșelătoare

deseori păcăli oamenii făcându-le să creadă că sunt oameni, reducând așteptările, în acest caz dându-se drept cineva care scrie prost în limba engleză.”54 Astăzi, unele dintre aceste strategii care au fost concepute și dezvoltate de concurenții Premiului Loebner sunt mobilizate de roboții din rețelele sociale care se prefac că fii om. În acest sens, premiul, promovat ca un concurs de dezvoltare a mașinilor inteligente, s-a dovedit a fi mai mult un banc de testare pentru credulitatea oamenilor confruntați cu mașini vorbitoare.

De fapt, una dintre criticile obișnuite la adresa premiului este că, ca urmare a dependenței de trucuri, programele din competiție nu au obținut progrese semnificative la nivel tehnic și, prin urmare, nu pot fi considerate IA de vârf.55 Cu toate acestea, nivelul relativ scăzut de inovare tehnologică face ca succesul repetat al multor programe în păcălirea judecătorilor să fie cu atât mai izbitor. Cum ar putea sisteme foarte simple precum PC Therapist și CONVERSE să aibă atât de mult succes? O parte a răspunsului constă în împrejurarea, binecunoscută bărbaților de încredere, mediumilor psihici și animatorilor la PT Barnum, că oamenii sunt ușor păcăliți.56 După cum a recunoscut Epstein, „concursul ne spune la fel de multe, sau poate chiar mai mult. , despre eșecurile noastre ca judecători, precum și despre eșecurile computerelor.”57

Cu toate acestea, a fi mulțumit cu simpla afirmație că oamenii sunt creduli, fără a o explora în întreaga sa complexitate și în contextul specific al comunicării om-mașină, ar însemna să ignorăm ceea ce ne poate spune cu adevărat concursul Premiul Loebner. În căutarea unor răspunsuri mai nuanțate, se poate lua în considerare discuția lui Suchman despre problema „habitabilitate” în ceea ce privește limbajul, adică „tendința utilizatorilor umani de a presupune că un sistem informatic are abilități lingvistice sofisticate după ce le-a afișat pe cele elementare. ”58 Acest lucru ar putea avea de-a face cu experiența, confirmată constant în schimburile de zi cu zi cu propria noastră specie, că cei care stăpânesc limbajul au într-adevăr astfel de abilități. Până de curând, singurul precedent al oamenilor în interacțiunea cu entitățile care folosesc limbajul a fost alinozi exclusiv cu alți oameni. Acest lucru ajută la explicarea de ce, așa cum au demonstrat cercetările în comunicarea om-mașină, utilizatorii tind să adopte automat comportamente sociale cu mașinile care comunică în limbaj natural.59 Ceva similar s-a întâmplat și cu introducerea tehnologiilor de comunicare care înregistrau și transmiteau electric mesajele în limbaj natural. . Deși medierea crește separarea dintre emițător și receptor, oamenii au transferat cu ușurință cadre de interpretare care erau obișnuite în schimburile de la persoană la persoană, inclusiv empatia și afectul.60

Istoricul de artă Ernst Gombrich – a cărui artă și iluzie este, deși fără ca majoritatea teoreticienilor media să știe, o capodopera a teoriei mass-media – prezintă un mod interesant de a privi această problemă atunci când susține că
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„iluzia artei presupune recunoașterea.” El folosește exemplul unui desen al lunii. Capacitatea unui spectator de a recunoaște această lună, notează el, are puțin de-a face cu modul în care apare luna. Are mult mai mult de-a face cu faptul că privitorul știe cum arată desenul unei luni și, prin urmare, face o ghicire corectă – în loc să se gândească, de exemplu, că desenul înfățișează o brânză sau o bucată de fruct. Obiceiurile noastre vizuale orientează recunoașterea mult mai mult decât orice corespondență între desen și aspectul „natural” al lunii.61 Privind problema IA din acest punct de vedere, utilizarea limbajului poate fi văzută ca facilitând un efect de recunoaștere, orientându-și presupunerea că comunică cu un actor inteligent.

În gândirea sociologică, noțiunea de habitus a lui Pierre Bourdieu descrie setul de obiceiuri și dispoziții prin care indivizii percep și reacționează la lumea socială. În mod crucial, habitus permite indivizilor să înțeleagă situații noi bazate pe experiențe anterioare. În contextul interacțiunilor om-calculator prin limbajul natural, habitus-ul interacțiunilor lingvistice anterioare informează noi experiențe de schimburi cu computere în limbaj scris sau vorbit. dacă mașina nu se ridică la nivelul așteptărilor. După cum notează Timothy Bickmore și Rosalind Pickard, „deși este ușor să-i convingi pe utilizatori să implice cu ușurință un agent în dialogul social, este o sarcină extrem de provocatoare să-l faci pe agent să mențină iluzia unui comportament asemănător omului în timp.”63. poate sugera că actul de comunicare, întreprins în limbaj natural, ajută la aprinderea habitus-ului înrădăcinat în utilizator de interacțiunile anterioare cu oamenii. Puterea acestui „efect de recunoaștere” (pentru a-l parafraza pe Gombrich) se dizolvă ulterior dacă IA nu este capabilă să se angajeze cu convențiile lingvistice și sociale care sunt, de asemenea, încorporate în habitus-ul individului prin socializare.

Este interesant de văzut cum se desfășoară această dinamică în contextul competiției Premiul Loebner. Programele de calculator sunt clasificate aici pentru capacitatea lor de a menține pentru un timp dat efectul de recunoaștere creat de utilizarea limbajului natural. Capacitatea lor de a realiza acest lucru este informată de o combinație între funcționarea internă a programului, habitus-ul arbitrilor și regulile de joc ale competițiilor Premiul Loebner. Am menționat mai devreme că unele dintre interpretările testului Turing de către comisia premiului au fost menite să ofere un avantaj programatorilor. Cu toate acestea, s-ar putea chiar să depășească această afirmație pentru a susține că testul Turing în sine răspunde în mare măsură scopului de a limita modurile în care efectul de recunoaștere ar putea fi contestat. Elemente precum timpul scurt disponibil pentru conversație și faptul că comunicarea se realizează prin mediere
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a unei interfețe doar text sunt menite să restrângă sfera experienței, ușurând astfel sarcina computerelor. Toate aceste limite ale experienței de comunicare reduc posibilitatea ca efectul de recunoaștere inițial și iluzia umanității să se erodeze.64

Multe dintre trucurile programatorilor sunt, de asemenea, îndreptate spre limitarea sferei conversațiilor, astfel încât indicii potențiale că computerul încalcă convențiile conversaționale și sociale vor fi minimizate. Utilizarea conversațiilor capricioase și a prostiei, de exemplu, ajută la respingerea încercărilor de a întreține conversații pe subiecte care nu ar fi tratate suficient de bine de program. Trecerea de la conversații pe subiecte specifice la conversații fără restricții după ediția din 1995 a concursului Loebner Prize nu a redus importanța acestei tactici. Dimpotrivă, prostii și răspunsurile neregulate au devenit și mai vitale pentru a se proteja împotriva întrebărilor care ar fi putut pune în pericol efectul de recunoaștere.65 Concurenții la Premiul Loebner trebuie să lupte să nu creeze o iluzie, ci, mai precis, să o păstreze, iar aceasta este de ce cei mai de succes chatboți au aplicat o strategie „defensivă” – găsirea de trucuri și comenzi rapide pentru a restricționa ancheta judecătorilor, în loc să coopereze cu aceștia.66 Această abordare a informat și încercările de a produce efecte de personalitate și caracterizare în programarea chatbot-urilor pentru premiu.

VIAȚA CIVICĂ LA CONCURSUL DE PREMII LOEBNER: CARACTERIZARE, PERSONALITATE ȘI GEN

Câștigătorul Premiului Loebner din 1994 a fost un sistem numit TIPS. Creatorul său, programatorul Thomas Whalen, a fost condus de o viziune mai ambițioasă decât cea a câștigătorilor anteriori, de exemplu, creatorii PC Therapist. Scopul lui nu a fost să confunde judecătorii cu prostii sau conversații capricioase, ci să-și insufle chatbot-ul cu modelul simplu al unei ființe umane, inclusiv o personalitate, o istorie personală și o viziune asupra lumii. În speranța de a restrânge sfera conversației, s-a hotărât asupra unui personaj masculin cu o viziune limitată asupra lumii, care nu citea cărți și ziare, muncea noaptea și, prin urmare, nu putea să se uite la televiziunea în prime-time. Whalen a creat și o poveste care să fie dezvăluită treptat judecătorilor: personajul lui TIPS a lucrat ca îngrijitor la Universitatea din Eastern Ontario, iar în ziua premiului „el” fusese îngrijorat că ar fi fost acuzat de „șeful lui” că a furat. ceva. „Nu am furat nimic în viața mea”, a subliniat TIPS în conversațiile cu judecătorii, „dar ei dau vina pe cei care fac curățenie atunci când lipsește ceva.”67
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Abordarea lui Whalen sugerează că problema creării de chatbot-uri credibile din punct de vedere social nu este doar tehnologică, ci și dramaturgică.68 Dramaturgii și romancierii, de fapt, creează personaje hrănind publicului și cititorilor aspecte ale istoriei personale și ale personalității lor. Dezvoltatorii de chatbot și oamenii de știință AI au folosit adesea cadre literare și teatrale pentru a reflecta asupra interacțiunilor utilizatorilor cu agenții AI.69 De exemplu, conceptul de suspendare a neîncrederii, adică ideea că, consumând un produs de ficțiune, trecem printr-o eliminare momentană. a nivelului nostru normal de scepticism, astfel încât să răspundem emoțional la evenimente și povești despre care știm că sunt fictive – este uneori menționat în literatura informatică cu privire la efectele asupra utilizatorilor programelor interactive de calculator, inclusiv chatbot-uri.70 La fel ca în conversații cu SFATURI, în ficțiunea literară personajele sunt adesea construite prin câteva propoziții și acțiuni.71 În acest sens, jocul decepției de la concursul Premiul Loebner poate fi văzut și din punct de vedere al caracterizării și al povestirii.

O altă complicație este însă dimensiunea dialogică în care apare caracterizarea la concursul Premiul Loebner. După cum a arătat teoria semiotică, cititorii de ficțiune participă activ la construirea sensului.72 Cu toate acestea, caracterizarea prin intermediul unui chatbot diferă în mare măsură de ficțiune, implicând propria sa dinamică specifică. Rezultatul, de fapt, rezultă dintr-o combinație între programarea chatbot-ului și schimburile particulare conduse de interlocutorul său. În stabilirea premiului, ceea ce un judecător contribuie la conversație informează ce rânduri și răspunsuri sunt furnizate de chatbot.73 Prin urmare, scenariul personajului chatbot-ului trebuie să ia în considerare modul în care diferiți judecători ar putea conduce conversația - ceva care s-a dovedit foarte dificil de prognozat.74

Implicațiile acestei incertitudini pot fi observate în cazul TIPS. Strategia lui Whalen a fost în mare măsură eficientă, dar a funcționat doar atâta timp cât judecătorii au rămas în limitele înguste ale poveștii chatbot-ului. De fapt, când în 1995 reglementările Premiului Loebner cu privire la subiecte s-au schimbat și conversațiile au devenit nerestricționate, campioana apărătoare a intrat în competiție cu o evoluție a TIPS, Joe the Janitor, dar noua versiune a programului său s-a clasat doar pe locul al doilea. Whalen a avut câteva reflecții destul de interesante despre motivele înfrângerii sale:

În primul rând, am emis ipoteza că numărul de subiecte care ar apărea într-o conversație deschisă va fi limitat... Eroarea mea a fost că judecătorii, conform regulilor lui Loebner, nu i-au tratat pe concurenți ca pe niște străini . Mai degrabă, ei au testat în mod special programul cu întrebări neobișnuite precum „Ce ai mâncat aseară la cină?” sau „Care era prenumele lui Lincoln?” Acestea sunt întrebări pe care nimeni nu le-ar pune vreodată unui străin în primele cincisprezece minute ale a
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conversaţie. . . . În al doilea rând, am emis ipoteza că, odată ce judecătorul știa că vorbește cu un computer, va lăsa computerul să sugereze un subiect. . . . Astfel, programul meu a încercat să îi intereseze pe judecători în problemele angajării lui Joe cât mai curând posibil. ... Am fost surprins să văd cât de perseverenți au fost unii judecători în a refuza să discute vreodată despre slujba lui Joe.75

Ceea ce reiese din cuvintele lui Whalen este dificultatea de a folosi chatbot-urile ca dispozitive de povestire. Judecătorii nu au acceptat povestea lui Joe the Janitor; s-au împotrivit să li se spună o narațiune cu scenariu. Acest lucru se datorează, cel puțin parțial, platformei speciale a concursului Loebner Prize, o arenă a decepției și suspiciunii în care judecătorii se luptă să-și expună partenerii de conversație și să pună în discuție în mod activ natura lor artificială. Totuși, ceva din această dinamică informează și încercările de a insufla personalitate chatbot-urilor în alte contexte.

Gina Neff și Peter Nagy au susținut că agenția de bot în rețelele sociale este construită printr-o relație simbiotică între programul de calculator și utilizator. Acest lucru se aplică în special în cazul lui Tay, robotul de învățare automată lansat de Microsoft pe Twitter în 2016 pentru a „învăța” cum să „vorbească” cu utilizatorii prin interacțiuni susținute cu utilizatorii Twitter. (Botul a fost întrerupt în curând, deoarece a început să imite mesajele rasiste și abuzive care îi fuseseră direcționate de către utilizatori.) Cu toate acestea, afirmația lui Neff și Nagy că interacțiunile și reacțiile la roboți sunt „parte a aparatului social și tehnologic care sprijină agenția. în cadrul acestor sisteme” se aplică tuturor categoriilor de agenți de conversație AI.76 Deși gradul în care se întâmplă acest lucru și modul în care se întâmplă sunt specifice fiecărei platforme, personalitatea în roboți este un efect care se bazează pe contribuția activă a utilizatorilor umani. Și aceasta este o contribuție la mai multe niveluri diferite: pe de o parte, intrările utilizatorilor informează direcția luată de script-ul chatbot-ului; pe de altă parte se așteaptă și utilizatorul să proiecteze sens și personalitate asupra agentului artificial.77

Acesta este motivul pentru care încercările de a face chatboții să comunice între ei par adesea atât de ciudate. Luați, de exemplu, celebra conversație dintre ELIZA și PARRY, care a fost organizată de Vint Cerf în 1973 pentru o demonstrație la o conferință pe computer:

[ELIZA] Ai vrea să discutăm despre nervii tăi?

[PARRY] *Bănuiesc că da.

Ce îți sugerează asta?

*La ce ajungi?

Ce răspuns te-ar plăcea cel mai mult? *Nu este o chestiune sau le place sau nu.

Ce altceva ai vrea să discutăm?
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*M-am săturat să răspund mereu la aceleași întrebări.

Ce asemănare vezi?

*De ce trebuie să știi asta?

Ce crezi?

* Nu vă înțeleg motivele.

De ce nu înțelegi motivele mele?78

Această conversație arată limitările acestor chatboți timpurii, precum și incompatibilitatea regulilor ELIZA și PARRY: rutinele ELIZA au fost planificate să devieze în timp ce PARRY a fost programat să provoace.79 Dar această conversație arată, de asemenea, că chatboții au fost programați pentru a provoca. intră în conversații cu oamenii mai degrabă decât cu alte mașini. Este util, în acest sens, să recăpătăm discuția din capitolul 2 al argumentului lui McLuhan că media sunt „extensii” ale oamenilor. Mass-media moderne sunt create după imaginea omenirii: sunt concepute, dezvoltate și fabricate astfel încât să se poată adapta utilizatorilor lor. Chatboții și agenții AI planificați pentru comunicarea cu oamenii în general, nu fac excepție. Ele sunt proiectate cu un model al omului în minte, care ia în considerare și motivația acestui utilizator imaginat în contextul așteptat de interacțiune. Acest model ar putea fi defectuos, după cum arată comentariile lui Whalen despre eșecul său de a prevedea comportamentul judecătorilor la concursul Loebner Prize. Mai mult, acest model este adesea limitat la o viziune restrânsă a omului care neglijează alteritatea de rasă, gen și clasă. Dar cu siguranță direcționează alegerile programaților în caracterizarea chatbot-urilor lor. În acest sens, faptul că chatbot-ii conversează prost între ei nu se datorează faptului că este imposibil sau chiar complicat la nivel tehnic, ci pur și simplu pentru că nu sunt meniți. Însăși ideea de a crea un efect de personalitate în chatboți, de fapt, presupune recunoașterea faptului că acesta va fi realizat prin contribuția — în termeni de proiecție și atribuire de simț — a utilizatorilor umani.

Caracterizarea se află, în această privință, în primul rând în ochii deținătorului. Oamenii, de fapt, sunt obișnuiți să atribuie agenție și personalitate. Ei fac atât prin experiențele din viața lor de zi cu zi, cât și prin consumul lor de ficțiune atunci când întâlnesc personaje fictive într-o poveste. Acest lucru se manifestă în modul în care chatbot-ii de la competiția Premiului Loebner, la fel ca alte mijloace media, cum ar fi televiziunea sau presa, manipulează reprezentările de rasă, gen și clasă pentru a construi personaje pe care judecătorii le vor considera credibile.80 Mark Marino susține că spectacolele de succes a chatbot-urilor sunt „rezultatul conformității dintre așteptările unui comportament adecvat de gen al interactorului și interacțiunile cu chatbot-ul.”81 Aceste așteptări nu au rămas neanticipate de către Premiul Loebner.
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concurenți, așa cum este evident în abordările variate de a se baza pe reprezentări stereotipate ale genului și sexismului. În al doilea an al competiției, de exemplu, programatorul Joseph Weintraub a ales subiectul „bărbați vs femei” pentru testul Turing restricționat.82 În 1993, Ken Colby și fiul său Peter au ales subiectul „căsătorie proastă”; chatbot-ul lor s-a prezentat ca o femeie și s-a plâns, cu replici flagrant sexualizate, că „soțul meu este impotent și sunt [sic] un nimfoman.”83 Un exemplu notabil de chatbot care a adoptat stéréotipuri sexiste este Julia, care a fost dezvoltat inițial pentru a locui. comunitatea online tinyMUDs și mai târziu a concurat pentru Premiul Loebner. Acest chatbot a făcut apel la menstruație și la sindromul premenstrual la attempi pentru a-și justifica răspunsurile inconsecvente prin stereotipuri de gen.84

Inițial, Turing și-a prezentat testul ca o variantă a jocului victorian în care jucătorii trebuiau să afle dacă interlocutorul lor era bărbat sau bărbat.85 Acest lucru sugerează, după cum au observat unii, că testul Turing este poziționat la intersecția dintre convențiile sociale și Ca persoană care a suferit intoleranță și a fost ulterior condamnată pentru comportamentele sale sexuale, Turing a fost instinctiv sensibil la problemele de gen, iar acest lucru ar fi putut să-i fi informat propunerea, conștient sau inconștient.87 În cadrul concursului Premiul Loebner, adoptarea reprezentărilor de gen. ca strategie coroborează și mai mult ipoteza că chatbot-urile sunt extensii ale oamenilor, deoarece se adaptează și profită de părtinirile, prejudecățile și credințele oamenilor. Deoarece judecătorii sunt dispuși să-i citească pe alții conform indicațiilor convenționale, performanța convențiilor sociale și a convingerilor sociale este menită să întărească efectul de realism pe care îl caută programatorii. Acest lucru se aplică atât genului, cât și altor forme de reprezentări, cum ar fi rasa (recunosc cazul botului rus care l-a păcălit pe Epstein) și clasa (ca în povestea curățătorului inventat de Whalen pentru a câștiga premiul).88

În arena decepției organizată la concursul Loebner Prize, stéréotipurile de gen sunt folosite ca tactică pentru a înșela judecătorii. Cu toate acestea, chatboții sunt, de asemenea, programați pentru a realiza genul în alte platforme și sisteme. Jocul cu schimbul de gen a fost o dimensiune constantă a interacțiunilor online, de la temnițele cu mai mulți utilizatori din anii 1980 la camerele de chat și la rețelele sociale actuale. Strategii similare au fost, de asemenea, replicate în proiectarea interfețelor sociale, unele dintre acestea punând în aplicare scripturi familiare despre munca femeilor, de exemplu în cazul serviciilor pentru clienți.89 Acesta a fost și cazul doamnei Dewey, o interfață socială dezvoltată de Microsoft pentru suprapune platforma Windows Live Search între 2006 și 2009. Reprezentată ca o femeie nealbă cu identitate etnică ambiguă, doamna Dewey a fost programată să reacționeze la anumiți termeni de căutare cu clipuri video care conțineau conținut emoționant și de gen. După cum arată convingător Miriam Sweeney
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în teza sa de doctorat pe această temă, genul și rasa au servit drept elemente infrastructurale care au facilitat încadrarea ideologică a căutărilor web în această platformă Microsoft.90 Interfața doamnei Dewey a întărit astfel prin caracterizare părtinirea de bază a algoritmilor motoarelor de căutare, care au fost adesea găsite. pentru a reproduce rasismul și sexismul și pentru a orienta utilizatorii spre rezultate părtinitoare ale căutării. Doamna Dewey, cu alte cuvinte, a reprodus la nivel de reprezentare, cu clipurile video, ceea ce Sistemele de regăsire a informațiilor care oferă acces la web au executat la nivel operațional.91 Această abordare reverberează în caracterizarea asistenților vocali AI contemporani, cum ar fi Alexa, care este oferit în mod implicit clienților ca un personaj iemale.92

PREMIUL LOEBNER ȘI SOCIALITATE ARTIFICIALĂ

Până în prezent, niciun program de calculator care a concurat pentru Premiul Loebner nu a trecut testul Turing. Chiar dacă cineva va face asta vreodată, totuși, nu va însemna că o mașină „gândește”, ci, mai modest, așa cum a subliniat însuși Turing în articolul său, doar că un computer a trecut acest test. Având în vedere hype-ul care a înconjurat premiul, precum și alte concursuri între om versus computer în trecut, se poate anticipa că o astfel de performanță ar îmbunătăți totuși percepția asupra realizărilor AI, chiar dacă ar putea să nu aibă un impact echivalent la nivelul progresului tehnic. Într-adevăr, popularitatea unor astfel de evenimente atestă o teamă, dar și o profundă fascinație, în culturile contemporane cu ideea de mașini inteligente. Această fascinație este evidentă în reprezentările ficționale ale AI: visul conștiinței artificiale și coșmarul rebeliunii robotilor au informat mult filmul și literatura științifico-fantastică de la apariția computerelor. Dar această fascinație este evidentă și în rapoartele și discuțiile despre spectacolele publice în care AI este celebrată ca o formă de spectacol, cum ar fi competiția cu premiul Loebner. Oamenii par să aibă o dorință oarecum ambivalentă, dar totuși profundă, de a vedea adevăratul mitul mașinii de gândire, care modelează multe rapoarte jurnalistice și dezbateri publice despre testul Turing.93

După cum am arătat, concursul Loebner Prize spune mai multe despre modul în care oamenii sunt înșelați decât despre starea actuală a calculatoarelor și AL Concursul Loebner Prize a devenit o arenă a înșelăciunii care plasează în centrul atenției răspunderea oamenilor pentru a fi înșelați. Cu toate acestea, acest lucru nu face acest concurs mai puțin interesant și util pentru înțelegerea dinamicii sistemelor AI comunicative. Este adevărat că în „viața reală”, adică în cele mai comune forme de interacțiune om-calculator, utilizatorii nu
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se așteaptă să fie înșelat în mod constant și nici nu încearcă în mod constant să evalueze dacă interacționează cu un om sau nu. Cu toate acestea, devine din ce în ce mai greu să se facă distincția între agenții umani și mașini pe web, așa cum arată răspândirea roboților din rețelele sociale și omniprezența CAPTCHA-urilor – care sunt teste Turing inversate pentru a determina dacă utilizatorul face sau nu o solicitare către un pagina web este un om.94 Dacă este adevărat că posibilitatea de decepție este sporită de limitele pe care concursul Loebner Prize le pune experiențelor comunicative, cum ar fi interfața textuală și regulamentele premiului, este de asemenea adevărat că „limite” similare. caracterizează comunicarea om-mașină pe alte platforme. După cum subliniază Turkle, „chiar înainte de a crea roboții, ne refacem ca oameni gata să le fim tovarășii”. Rețelele de socializare și alte platforme oferă cadre foarte structurate care fac decepția relativ mai ușoară decât în interacțiunile față în față sau chiar în alte conversații mediate, ca în cazul unui cali telefon.95

În plus, decepțiile absolute puse în scenă la concursul Premiului Loebner ajută la reflectarea asupra diferitelor forme de relații și interacțiuni cu AI care sunt modelate de forme banale de decepție. După cum va fi discutat în capitolul următor, chiar și asistenții vocali, cum ar fi Alexa și Siri, au adoptat unele dintre strategiile dezvoltate de concurenții la Premiul Loebner, cu diferența că „trucurile” sunt menite să nu facă utilizatorii să creadă că asistentul vocal este un om. dar, mai subtil, la susținerea experienței deosebite a socialității care facilitează angajamentele cu aceste instrumente. Iar boții din rețelele de socializare, care au fost utilizați recent și pentru aplicații problematice, cum ar fi comunicarea politică, și-au însușit multe dintre strategiile iluminate de concursul Loebner Prize.96 Printre trucurile folosite de concurenți în premiu care au fost integrate în design dintre instrumentele AI de uz zilnic sunt turnarea pe rând, încetinirea răspunsurilor pentru a se adapta la ritmurile conversației umane și utilizarea ironiei și glumelor. Injectarea unei personalități și crearea unui rol convingător pentru chatbot într-o conversație a fost esențială pentru succesul la premiu, dar este și o strategie de lucru pentru a crea sisteme AI comunicative care pot fi integrate în medii sociale complexe, cum ar fi familiile, comunitățile online și profesioniști. spatii.97

Concursul Loebner Prize, în acest sens, este un exercițiu de simulare a socialității la fel de mult ca și de simulare a inteligenței. Executarea cu succes a testului Turing depășește capacitatea de a înțelege sensul unui text și de a produce un răspuns adecvat. De asemenea, necesită capacitatea de a se adapta la convențiile sociale de conversație și schimburi. De exemplu, deoarece emoțiile sunt o parte integrantă a comunicațiilor dintre oameni, un program de calculator beneficiază de a fi capabil să recunoască emoțiile și
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conceperea unor răspunsuri afective adecvate.98 În timp ce alte competiții om versus mașină, cum ar fi șahul, au subliniat capacitatea mașinii de a lua decizii strategice, competiția Loebner Prize face din socialitate o caracteristică definitorie pentru AI. Mesajul său cheie nu este că AI va fi sau nu va fi vreodată atins, ci mai degrabă că nu există nimic ca „inteligența artificială”: există doar interacțiuni sociale care duc la atribuirea inteligenței mașinilor.
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CAPITOLUL 6

То Crede în Siri

O analiză critică a asistenților vocali

Vorbește cu Siri așa cum ai face cu o persoană”, a sugerat Apple utilizatorilor asistentului său vocal Siri în 2011, după ce acesta a fost inclus în sistemul de operare iPhone.1 Acest mesaj a fost menit să inspire un sentiment de familiaritate cu asistentul. . Apple a sugerat că totul era deja pus la punct pentru a adapta noua tehnologie în experiența de zi cu zi: utilizatorii trebuiau doar să-și extindă obiceiurile conversaționale la interlocutorul invizibil încorporat în telefon.

Având în vedere succesul rapid al Siri și al altor asistenți vocali în următorii ani, este posibil ca incitarea Apple să fi funcționat. Instrumente similare au fost dezvoltate în curând de alte corporații digitale de top: Amazon a introdus Alexa în 2014, Google a urmat cu Asistentul său în 2016, în timp ce Cortana de la Microsoft, acum întreruptă, a fost lansat și mai devreme, în 2013. În doar câțiva ani, tehnologia a plecat. spațiile confidate ale smartphone-urilor să locuiască în tot felul de dispozitive digitale, de la ceasuri la tablete și difuzoare, locuind atât în mediul casnic, cât și în cel profesional. La fel cum interfețele graphie se bazează pe informații vizuale pentru a facilita interacțiunea, asistenții vocali se bazează pe software care recunoaște și produce intrări vocale. Comenzile și întrebările utilizatorilor sunt apoi elaborate prin algoritmi de procesare a limbajului care oferă răspunsuri la întrebările utilizatorilor sau execută sarcini precum trimiterea de e-mailuri, căutarea pe web și aprinderea lămpilor. Fiecare asistent este reprezentat ca un personaj sau o persoană individuală (de exemplu, „Siri” sau „Alexa”) care, în ciuda faptului că nu este uman, poate fi imaginat și cu care poate interacționa ca atare. După cum au confirmat cercetările de piață și rapoartele independente, acestea au fost
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adoptat de sute de milioane de utilizatori din întreaga lume, făcând vocea un mediu cheie de interacțiune cu tehnologiile computerizate în rețea.2

Cu toate acestea, incitarea unor companii precum Apple de a vorbi cu asistenții vocali „ca cu o persoană” merită să fie pusă la îndoială. Au devenit asistenții vocali ceva cu care vorbim „cum am face cu o persoană”, așa cum ne-au promis liniile de marketing ale Siri? Și dacă da, ce înseamnă asta? Concentrându-se pe cazurile Alexa, Siri și Google Assistant, acest capitol susține că asistenții vocali activează o relație ambivalentă cu utilizatorii, dându-le iluzia de control în interacțiunile lor cu asistenții și, în același timp, retrăgându-i de controlul real asupra Sistemele de calcul care se află în spatele acestor interfețe. Arăt cum acest lucru este posibil la nivel de interfață prin mecanisme de decepție banală care se așteaptă ca utilizatorii să contribuie la construirea asistentului ca persoană și cum această construcție ascunde în cele din urmă sistemele de calcul în rețea administrate de corporațiile puternice care au dezvoltat aceste instrumente. .

O analiză critică a asistenților vocali înseamnă dezvăluirea diferitelor strategii și mecanisme prin care utilizatorii sunt încurajați să se adapteze la obiceiurile și comportamentele sociale existente, astfel încât să poată „vorbi” cu asistentul AI. Astfel de strategii nu sunt în niciun caz simple și nu corespund cu păcălirea utilizatorilor să creadă că AI gândește sau se simte „ca o persoană”. Asistenții de inteligență artificială se bazează pe tendința oamenilor de a proiecta identitatea și umanitatea pe artefacte, dar în același timp nu implică nicio decizie din partea utilizatorilor cu privire la ontologia lor. Cu alte cuvinte, nu solicită utilizatorilor să decidă dacă vorbesc cu o mașină sau cu o persoană. Le cer doar să vorbească.

Deși utilizatorii beneficiază în cele din urmă de funcționalitatea asistenților AI și de o capacitate îmbunătățită de a adapta noua tehnologie în viața lor de zi cu zi, cineva rămâne să se întrebe dacă este sigur să avem încredere în companii precum Apple, Amazon și Google pentru a microgestiona mai multe părți din viața noastră. . Singura modalitate de a găsi un răspuns la această întrebare este să analizăm stratificarea complexă a tehnologiilor și practicilor care modelează relația noastră cu aceste instrumente.

UNU SI TREI

În tradiția teologică creștină, Dumnezeu este „unu și trei”: Tată, Fiu, Duh Sfânt. Această doctrină, numită Trinitatea, a stimulat discuții teologice aprinse de-a lungul multor secole. De fapt, este unul dintre elementele credinței creștine care pare cel mai confuz pentru credincioși: ideea că cele trei „persoane” lui Dumnezeu sunt distincte și, în același timp, contrastează cu
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ipoteze larg răspândite despre individualitate, prin care a fi unul și a fi trei se exclud reciproc.3

O dificultate similară implică și software-ul. Multe sisteme care sunt prezentate ca entități individuale sunt de fapt o combinație de programe separate aplicate unor sarcini diverse. Pachetul comercial de software de editare grafică cunoscut sub numele de Photoshop, de exemplu, ascunde în spatele mărcii sale populare o stratificare complexă de sisteme discrete dezvoltate de diferiți dezvoltatori și echipe de-a lungul mai multor decenii.4 Când ne uităm la software, faptul că ceea ce este unul este, de asemenea, în același timp, multe ar trebui să fie considerate nu ca o excepție, ci ca o normă. Acest lucru cu siguranță nu face software-ul dozator pentru Dumnezeu, dar îl face puțin mai dificil de înțeles.

Asistenții vocali contemporani, cum ar fi Alexa, Siri și Google Assistant, sunt, de asemenea, unul și mai mulți în același timp. Pe de o parte, se oferă utilizatorilor ca sisteme individuale cu nume distinctive și caracteristici umane. Pe de altă parte, fiecare asistent este de fapt o combinație a multor sisteme software interconectate, dar distincte, care îndeplinesc anumite sarcini. Alexa, de exemplu, este un ansamblu complex de infrastructuri, artefacte hardware și sisteme software, ca să nu mai vorbim de dinamica muncii și a exploatării care rămân ascunse clienților Amazon.5 După cum a spus dezvoltatorul BBC Henry Cooke, „nu există un astfel de lucru ca Alexa”, ci doar o multitudine de procese algoritmice discrete. Cu toate acestea, Alexa este percepută ca un lucru de către utilizatorii săi.6

Deception banală operează prin ascunderea funcțiilor subiacente ale mașinilor digitale printr-o reprezentare construită la nivelul interfeței. O analiză critică a decepției banale necesită, așadar, examinarea relației dintre cele două niveluri: nivelul superficial al reprezentării și mecanismele subiacente care sunt ascunse sub suprafață, chiar dacă acestea contribuie la construirea reprezentării suprapuse. În IA comunicativă, stratul de reprezentare coincide și cu stimularea angajamentului social cu utilizatorul. Asistenții vocali se bazează pe elemente distinctive, cum ar fi o voce recunoscută, un nume și elemente pentru a sugera o persoană distinctă, cum ar fi „Alexa” sau „Siri”. Din punctul de vedere al utilizatorilor, o persoană este mai presus de toate o construcție imaginară, care transmite sentimentul unei relații continue cu o figură a cărei apariție poate fi contată ca un eveniment regulat și de încredere și este integrată în rutinele vieții de zi cu zi. 7

În stratul ascuns se află mai multe procese software care funcționează împreună, dar sunt structural și formal distincte. Deși întreaga „anatomie” a asistenților vocali este mult mai complexă, trei sisteme software sunt cruciale pentru funcționarea decepției banale a asistenților vocali, care se mapează aproximativ cu domeniile procesării vorbirii, procesării limbajului natural și regăsirea informațiilor (fig. 6.1). Primul sistem, vorbirea
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Figura 6.1 Asistenții vocali AI ca „unu și trei”.

procesare, constă în algoritmi care pe de o parte „ascultă” și transcriu vorbirea utilizatorilor și, pe de altă parte, produc vocea sintetică prin care asistenții comunică cu utilizatorii.8 Al doilea Sistem, procesarea limbajului natural, este format din programele conversaționale. care analizează intrările transcrise și, ca și în cazul unui program chatbot, elaborează răspunsuri în limbaj naturai.9 Cel de-al treilea sistem, regăsirea informațiilor, constă din algoritmii care preiau informații relevante pentru a răspunde interogărilor utilizatorilor și a activa sarcinile relevante. În comparație cu procesarea vorbirii și procesarea limbajului natural, relevanța algoritmilor de regăsire a informațiilor este poate mai puțin evidentă la prima vedere. Cu toate acestea, ele permit asistenților vocali să acceseze resurse bazate pe Internet și să fie configurați ca proxy-uri ale utilizatorilor pentru navigarea pe web.10 După cum vor arăta următoarele secțiuni, diferențele dintre aceste trei sisteme software nu sunt limitate la funcțiile lor, deoarece fiecare dintre ele se bazează pe abordări distincte ale calculatoarelor și ale Aïs și are implicații diferite atât la nivel tehnic, cât și la nivel social.

PROCESAREA VORBIILOR SAU PUTEREA MOLE A VOCII

De la inventarea mijloacelor media, cum ar fi fonograful și telefonul, oamenii de știință și inginerii au dezvoltat o gamă de sisteme analogice și digitale pentru înregistrarea și reproducerea sunetului. Ca toate mediile moderne, mediile de sunet, așa cum am discutat mai devreme, au fost produse sub forma unui utilizator uman. De exemplu, studiile asupra auzului uman au fost încorporate în proiectarea unor tehnologii precum fonograful, care înregistra și reproducea sunetul care se potrivea cu frecvențele de sunet percepute de oameni.11 Un similar
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munca de adaptare a implicat, de asemenea, vocea umană, care a fost imediat considerată ca domeniul cheie de aplicare pentru reproducerea și înregistrarea sunetului.12 De exemplu, în 1878, inventatorul fonografului, Thomas Alva Edison, a imaginat nu muzică, ci înregistrări vocale pentru luarea de notițe sau înregistrările de familie ca cele mai promițătoare aplicații pentru crearea sa.13 S-au depus, prin urmare, eforturi specifice pentru îmbunătățirea medierii vocii.

Astfel de eforturi au profitat de faptul că oamenii sunt construiți sau „conectați” pentru vorbire.14 O voce umană este mai ușor auzită de oameni decât alte zgomote, iar vocile familiare sunt recunoscute cu o precizie abia egalată de viziunea unui chip cunoscut. Această calitate se concretizează în comunicările mediate. În cinema, de exemplu, tendința publicului de a recunoaște o voce și de a localiza imediat sursa acesteia îndeplinește mai multe funcții, adăugând coeziune narațiunii și insuflând personajelor simțul „vieții” – adică prezența și agenția.15 În mod similar, în conversațiile vocale prin telefon sau alte mijloace media, capacitatea de a recunoaște și de a identifica o voce lipsită de corp este esențială pentru utilizarea mediului. Această abilitate permite utilizatorilor de telefon să recunoască o persoană familiară și să obțină indicii despre demografia și starea de spirit a proprietarului unei voci. Astfel, medierea tehnică a vocii se bazează pe caracteristicile percepției umane pentru a genera rezultate semnificative, care sunt fundamentale pentru experiența utilizatorului.

Urmărind această descendență tehnică și intelectuală, visul de a folosi limbajul vorbit ca interfață pentru a interacționa cu computerele este la fel de vechi ca și computerul în sine.16 Până de curând, totuși, interfețele bazate pe voce se luptau să ofere servicii fiabile utilizatorilor. Întâlnirea tehnologiilor de recunoaștere automată a vocii a fost adesea o experiență frustrantă: serviciile telefonice timpurii „apăsați sau spuneți una” nu au gestionat bine variațiile de accent sau ton, iar utilizatorii au fost adesea enervați sau amuzați de eforturile acestor sisteme de a înțelege chiar și intrările simple.17 În comparație cu performanțele lui Alexa sau Siri, mai ales, dar nu exclusiv, în limba engleză, ne întrebăm cum s-a îmbunătățit tehnologia atât de semnificativ într-un interval de timp atât de scurt. Secretul acestui progres rapid constă în una dintre cele mai semnificative schimbări tehnice pe care AI le-a experimentat de-a lungul istoriei sale: creșterea învățării profunde.

Învățarea profundă se referă la o clasă de algoritmi de învățare automată care se bazează pe calcule statistice complexe efectuate de rețele neuronale în mod autonom și fără supraveghere. Inspirate de funcționarea neuronilor biologici, rețelele neuronale au fost propuse foarte devreme în istoria IA, dar inițial păreau ineficiente.18 În anii 1980 și 1990, noi studii au arătat la nivel teoretic că rețelele neuronale ar putea fi extrem de puternice.19 Cu toate acestea, numai în anii 1990. în ultimul deceniu tehnologia și-a realizat potențialul maxim, datorită a doi factori principali: progresele hardware care au făcut computerele capabile
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să prelucreze calculele complexe cerute de rețelele neuronale și, chiar mai important, disponibilitatea unor cantități uriașe de date, adesea produse de utilizatori umani pe Internet, pentru a „antrena” algoritmi de învățare profundă pentru îndeplinirea unor sarcini specifice.20

Mai larg, învățarea profundă a apărut împreună cu o recalibrare a sistemelor interactive om-calculator. Pentru o gamă tot mai mare de aplicații AI, abilitățile „inteligente” nu sunt programate simbolic în mașină. În schimb, ele apar prin elaborarea statistică a datelor generate de oameni care sunt recoltate în rețelele de calcul prin noi forme de muncă și relații de putere automatizate.21 Împreună cu alte aplicații, cum ar fi analiza imaginilor și traducerea automată, procesarea vorbirii este una dintre domeniile AI care a beneficiat cel mai mult de pe urma creșterii învățării profunde. În doar câțiva ani, disponibilitatea unor mase de date care ar putea fi folosite pentru „antrenarea” algoritmilor a catalizat un salt înainte în procesarea automată a vocii umane de către computere. Procesarea vorbirii a fost în acest sens aplicația adevărată ucigașă a asistenților AI.22

Pe măsură ce procesarea tehnică a vocii umane a devenit mai sofisticată, companiile care au dezvoltat asistenți vocali au avut mare grijă să adapteze procesarea vorbirii la utilizatorii țintă - exact așa cum mediile audio analogice au profitat de studiile despre fiziologia și psihologia publicului lor pentru a îmbunătăți înregistrarea și reproducerea vocii.23 S-au dat gânduri semnificative la calibrarea modului în care vocea sintetică a asistentului ar suna în urechile utilizatorilor umani și pentru a anticipa reacțiile potențiale la modulații specifice.

Siri de la Apple a angajat inițial trei artiști diferiți de voce off pentru a reprezenta Statele Unite, Australia și Regatul Unit.24 Această decizie a fost un răspuns la nevoia de a se adapta la diferite accente engleze, precum și pentru a se adapta la ceea ce dezvoltatorii Apple credeau că sunt culturale. diferențe în ceea ce privește percepția vocilor masculine față de vocile cele feminine — decizia de a folosi o voce masculină în Regatul Unit și o voce masculină pentru Statele Unite și Australia.25 Mai târziu, Apple a inclus alte accente pentru limba engleză, cum ar fi irlandeză și sud-africana. și, de asemenea, ca răspuns la controversele legate de prejudecățile de gen, a permis personalizarea genului. Google Assistant s-a lansat cu o voce implicită masculină, dar a introdus o serie de voci masculine și a optat, tot ca reacție la controversele legate de sexism, pentru o selecție aleatorie a uneia dintre vocile disponibile ca implicită.26 Alexa este caracterizată în mod clar ca fiind iemale, deși opțiuni de personalizare au fost integrate recent de Amazon, care a lansat și un nou add-on remarcabil prin care vocea actorului american Samuel Lee Jackson este pusă la dispoziție utilizatorilor Alexa la prețul accesibil de 0,99,27 USD.
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Faptul că asistenții vocali au prezentat adesea voci masculine ca implicite a fost în centrul multor critici. Există dovezi că oamenii reacționează la indicii încorporate în vocile asistenților AI aplicând categorii și părtiniri atribuite în mod obișnuit oamenilor. Acest lucru este deosebit de îngrijorător dacă se consideră caracterizarea asistenților ca servitori docili, care reproduce reprezentări stereotipice ale muncii de gen.28 Așa cum a susținut Thao Phan, reprezentarea Alexa direcționează utilizatorii către o viziune idealizată a serviciului casnic, plecând de la istoricul realitatea acestei forme de muncă, deoarece vocea sugerează o femeie albă vorbitoare nativă, educată.29 În mod similar, Miriam Sweeney observă că majoritatea vocilor asistenților AI sugerează o formă de „alb implicit” care este presupusă de tehnologii ( și utilizatori) dacă nu se indică altfel.”30

Deși controversele publice au stimulat companiile să crească diversitatea vocilor sintetice, indicii de semne de identitate precum rasa, clasa și genul continuă să fie exploatate pentru a declanșa un joc de imaginație care se bazează pe cunoștințele și prejudecățile existente.31 Studii în computer-om. comunicarea arată că munca de proiecție este efectuată automat de utilizatori: un anumit gen, și chiar o rasă și o clasă, este imediat atribuită unei voci.32 Noțiunea de stereotip, în acest sens, ne ajută să înțelegem modul în care asistenții AI au dezcorporat. vocile activează mecanisme de proiecție care le reglează în cele din urmă utilizarea. După cum a arătat Walter Lippmann în studiul său clasic al opiniei publice, oamenii nu puteau face față întâlnirilor lor cu realitatea fără să dea de la sine înțeles unele reprezentări de bază ale lumii. În acest sens, stéréotipurile au rezultate ambivalente: pe de o parte, limitează profunzimea și detaliile percepției oamenilor asupra lumii; pe de altă parte, îi ajută pe oameni să recunoască tipare și să aplice categorii interpretative construite de-a lungul timpului. În timp ce stéréotipurile negative trebuie expuse și risipite, lucrarea lui Lippmann arată, de asemenea, că utilizarea stéréotipurilor este esențială pentru funcționarea mass-media, deoarece cunoașterea apare atât prin descoperire, cât și prin aplicarea unor categorii preconstituite.33

Acest lucru explică de ce principalii concurenți de pe piața asistenților AI selectează voci care transmit informații specifice despre o „persoană” – adică o reprezentare a individualității care creează sentimentul unei relații continue cu asistentul însuși. În alte servicii computerizate care utilizează tehnologii de procesare a vocii, cum ar fi serviciile pentru clienți, vocile sunt uneori făcute să sune neutre și evident artificiale. O astfel de alegere, însă, a fost considerată insuportabilă de companiile care aspiră să vândă asistenți AI care vor însoți utilizatorii pe tot parcursul vieții lor de zi cu zi. Pentru a funcționa corect, aceste instrumente trebuie să activeze mecanismele de reprezentare prin care utilizatorii își imaginează o sursă pentru voce – și,
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ulterior, un personaj stabil cu care să interacționeze, chiar dacă în limite relativ stricte.34 Așa cum ne-a învățat Lippmann, astfel de mecanisme se bazează pe stéréotipuri anterioare — ceea ce face alegerea unei strategii de voce de gen, dacă este extrem de problematică, pentru companii precum precum Apple și Amazon.35

Asistenții vocali încurajează utilizatorii, bazându-se pe aceștia pentru a-și aplica propriile stereotipuri, să contribuie activ la construirea simțului în jurul vocii neîncorporate. Acest lucru nu servește prea mult pentru a da „viață” asistenților – în ciuda tuturor caracterelor antropomorfe, utilizatorii își păstrează capacitatea de a diferenția clar între asistenții AI și persoanele reale.36 Mai subtil, stereotipurile ajută un utilizator să atribuie o identitate coerentă unui asistent. timp. Acest lucru se realizează în primul rând făcând vocea asistenților să fie recunoscută: unui asistent vocal i se poate atribui o personalitate coerentă de către utilizator numai datorită faptului că vocea sa sună întotdeauna la fel.37 Atribuirea genului, rasei și clasa prin stereotipuri determină semne suplimentare pentru a hrăni jocul de imaginație implicat în construirea de către utilizator a unei persoane.38

Astfel, vocile sintetice, umane ale asistenților AI, ca ei antropomorfe, nu sunt menite să producă iluzia de a vorbi cu un om, ci să creeze condițiile psihologice și sociale pentru proiectarea unei identități și, într-o oarecare măsură, a unei personalități asupra asistentului virtual. . Această formă banală de decepție nu implică nicio definiție strictă din partea utilizatorului: se poate înțelege perfect că Alexa este „doar” o bucată de software și, în același timp, realizează schimburi semnificative din punct de vedere social cu acesta. Întrucât în cele din urmă este lăsat utilizatorilor să atribuie semnificație socială, asistenții vocali lasă spațiu amplu pentru interpretarea individuală.

Acest lucru ajută la explicarea de ce cercetările au arătat că oamenii își construiesc relațiile cu asistenții vocali în moduri foarte diverse. De exemplu, în cercetarea calitativă a Andreei Guzman cu utilizatorii de agenți conversaționali mobili, participanții au oferit o serie de interpretări ale unor aspecte precum sursa unei voci, unii dintre ei identificând-o ca o voce „în” telefonul mobil, iar alții percepând-o ca voce. „de” telefon. Faptul că „locul și natura interlocutorului digital nu sunt uniforme în mintea oamenilor” este o consecință a gradului ridicat de participare care este necesar din partea utilizatorului.39 De asemenea, cercetările recente arată că diferiții utilizatori păstrează diverse tipuri de beneficii de la interacțiunile lor cu asistenții.40 Pentru a folosi termenul lui McLuhan, asistenții vocali sunt un mediu „mișto”, o noțiune pe care McLuhan se aplică mijloacelor de comunicare cum ar fi televiziunea și telefonul, care sunt cu definiție joasă și necesită participarea publicului.41 definiția scăzută a Alexa și a altor asistenți AI îi lasă pe ascultători să facă cea mai mare parte a muncii. Ca rezultat, însă, Alexa este lucruri diferite pentru diferite tipuri de utilizatori. Este,
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la urma urmei, o necesitate a oricărui mediu de difuzare în masă pentru a-și putea adapta mesajul la diverse populații.

Stili, designul interfețelor de voce exercită o influență incontestabilă asupra utilizatorilor. Dovezile experimentale arată că vocile sintetice pot fi manipulate pentru a încuraja proiecția indiciilor demografice, inclusiv sexul, vârsta și chiar rasa, precum și trăsăturile de personalitate, cum ar fi un personaj extrovertit sau introvertit, un personaj docil sau agresiv42. aceasta este, în cele din urmă, o putere indirectă „soft”, prin care atribuirea personalității este delegată jocului de imaginație al utilizatorilor. Definiția scăzută a asistenților vocali contrastează cu roboții umanoizi, a căror întruchipare materială reduce spațiul de contribuție al utilizatorului, precum și cu interfețele grafice, care lasă mai puțin spațiu imaginației.43 Caracterul imaterial al vocii neîncarnate nu trebuie văzut, totuși, ca o limitare: tocmai această dezcorporare este cea care îi forțează pe utilizatori să filtreze golurile și să-și facă asistenții vocali proprii, integrându-i mai profund în viața și identitățile lor de zi cu zi. După cum spune o linie de marketing pentru Google Assistant, „este propriul tău Google personal.”44 Algoritmii sunt aceiași pentru toți, dar se așteaptă să pui puțin din tine în mașină.

DE HAIKUS SI COMANDE: LIMBAJUL NATURAL

PRELUCRAREA ȘI DRAMATURGIA ASISTENȚILOR DE VOCE

Când ridic telefonul și îl întreb pe Siri dacă este inteligent, are un răspuns (ñg. 6.2).

Pentru mine, aceasta nu este doar o întorsătură de frază. Este o glumă interioară care indică tradiția îndelungată a reflecțiilor despre mașini, inteligență și conștientizare – până la articolul lui Turing din 1950 în care el susținea că întrebarea dacă mașinile pot „gândi” era irelevantă.45 Totuși, ce la prima vedere pare că un răspuns inteligent este de fapt unul dintre cele mai puțin „inteligente” lucruri pe care Siri le poate face. Acest răspuns, de fapt, nu este rezultatul unei simulări sofisticate a gândirii simbolice, nici nu a apărut din calculele statistice ale rețelelor neuronale. Mai simplu, a fost adăugat manual de un designer de la Apple, care a decis că o întrebare despre inteligența lui Siri ar trebui să aprindă un astfel de răspuns. Acesta este ceva ce un programator ar ezita să-l descrie ca codificare, respingându-l ca puțin mai mult decât scriere de scenarii – în jargonul Premiului Loebner, doar un alt „truc de programare”.

Recentul succes rapid al asistenților vocali i-a determinat pe mulți cercetători și comentatori să susțină că aceste instrumente au depășit în mod clar abilitățile conversaționale ale programelor conversaționale anterioare.46 Totuși, în contrast cu această presupunere larg răspândită, cei precum Alexa, Siri și Google Assistant fac
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Figura 6.2 Conversația autorului cu Siri, 15 decembrie 2019.

nu pleacă dramatic de sistemele anterioare, inclusiv de chatbot, cel puțin în ceea ce privește abilitățile lor conversaționale. Acest lucru se datorează gradului inegal de progres pe care l-a experimentat AI în ultimii ani. Creșterea învățării profunde a stimulat noi așteptări pentru domeniu și a captat imaginația publicului cu viziunea că IA va egala sau depăși oamenii în orice fel de sarcină în viitorul apropiat. Mitul mașinii de gândire a fost reaprins, iar întreprinderea AI se confruntă cu un nou val de răspunsuri entuziaste atât în sfera publică, cât și în cercurile științifice.47 Pretura, totuși, este mult mai complexă. Pentru toate potențialul rețelelor neuronale, nu toate domeniile AI au beneficiat de revoluția învățării profunde. Datorită dificultății de a regăsi și organiza datele despre conversații și, prin urmare, dificultății de a antrena algoritmi pentru această sarcină, sistemele conversaționale au fost până acum doar puțin afectate de învățarea profundă. După cum a spus jurnalistul tehnologic James Vincent, „învățarea automată este fantastică pentru a învăța reguli vagi în sarcini limitate (cum ar fi identificarea diferenței
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între pisici și câini sau identificarea cancerului de piele), dar nu poate transforma cu ușurință un teanc de date în liniile directoare complexe, care se intersectează și uneori iraționale care compun limba engleză modernă.”48

Astfel, în timp ce asistenții vocali reprezintă un pas înainte în IA comunicativă pentru domenii precum procesarea vocii, gestionarea conversațiilor lor se bazează în continuare pe o combinație de soluții tehnice și dramaturgice. Aparenta lor competență este rodul unora dintre aceleași strategii dezvoltate de dezvoltatorii de chatbot în ultimele decenii, combinate cu o cantitate fără precedent de date despre interogările utilizatorilor, care îi ajută pe dezvoltatori să-și anticipeze întrebările și să creeze răspunsuri adecvate. Competența dramaturgică insuflată asistenților vocali compensează cel puțin parțial limitările tehnice ale programelor conversaționale existente.49

În eforturile de a se asigura că asistenții AI răspund cu aparentă inteligență și par capabili să facă față glumelor, Apple, Amazon și, într-o măsură mai mică, Google au atribuit sarcina de a scrie răspunsuri echipelor creative dedicate.50 Similar cu chatbot-urile Premiului Loebner, care au fost programați. pentru a devia întrebările și a restrânge sfera conversațiilor, răspunsurile scrise permit asistenților vocali să ascundă limitele abilităților lor conversaționale și să mențină iluzia umanității evocată de vocea vorbitoare. De fiecare dată când i se cere un haiku, de exemplu, Siri renunță la o piesă diferită din acest gen de poezie, exprimându-și reticența („Rareori mă întrebi / ce vreau să fac astăzi / Sugestie: nu este haiku”), întrebând-o pe utilizator pentru o reîncărcare („Toată ziua și noaptea, / Am ascultat cum ați vorbit. / Încărcați-mi bateria”) sau evaluând fără entuziasm genul („Haiku poate fi distractiv / dar uneori nu au sens. / Hipopotamus” ).51 Deși activarea răspunsurilor scriptate este extrem de simplă la nivel tehnic, tonul lor de ironie poate fi izbitor pentru utilizatori, așa cum arată numeroasele pagini web și postări pe rețelele sociale care raportează unele dintre cele mai „amuzante” și „hilar de sincere” răspunsuri. .52 Ironia a jucat un rol esențial pentru ca chatboții să câștige credibilitate la Premiul Loebner, iar asistenții vocali beneficiază, de asemenea, de faptul că ironia este percepută ca o dovadă a sociabilității și a ascuțității minții.

Spre deosebire de chatbot-urile Premiului Loebner, obiectivul asistenților vocali nu este de a înșela utilizatorii să creadă că sunt oameni. Cu toate acestea, utilizarea „trucurilor” dramaturgice permite asistenților vocali să obțină efecte mai subtile, dar încă semnificative. Răspunsurile scriptate ajută la crearea unui aspect de personalizare, deoarece utilizatorii sunt surprinși când Siri sau Alexa răspund la o întrebare cu o linie inventive. „Smecheria” în acest caz este că asistenții AI sunt și sisteme de supraveghere care recoltează constant date despre interogările utilizatorilor, care sunt transmise și analizate de companiile respective. În consecință, dezvoltatorii asistenți AI sunt capabili să anticipeze unele dintre cele mai frecvente interogări și să îi pună pe scriitori să ofere răspunsuri adecvate.53 Consecința
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acest truc rămâne obscur pentru mulți utilizatori, creând impresia că asistentul vocal anticipează gândurile utilizatorului – ceea ce satisface așteptările pentru ceea ce este un asistent „personal”.54 Utilizatorii sunt astfel influențați să creadă că asistenții AI sunt mai capabili de un comportament autonom. decât sunt de fapt. După cum a observat Margaret Boden, ei par „să fie sensibili nu numai la relevanța actuală, ci și la relevanța personală”, considerând utilizatorii „superficial de impresionanți”.55

De asemenea, spre deosebire de chatbot-urile Premiului Loebner, asistenții vocali au simulat socialitatea doar ca una dintre funcții, nu ca rațiunea lor. Angajamentul social nu este niciodată impus utilizatorului, ci are loc numai dacă utilizatorii invită acest comportament prin interogări specifice. Când i se spune „Noapte bună”, de exemplu, Alexa va răspunde cu scripturi care includ „Noapte bună”, „Vise dulci” și „Nu ai avut o zi grozavă”. Cu toate acestea, astfel de răspunsuri nu sunt activate dacă utilizatorii solicită doar o alarmă pentru dimineața următoare. În funcție de intrarea utilizatorului, asistenții AI pun în aplicare diferite modalități de interacțiune. Alexa, Asistentul Google și Siri pot fi o diversiune amuzantă de petrecere într-o seară, pot face schimb de convivialitate pe timp de noapte, iar a doua zi revin să fie controlere vocale discrete care doar aprind și sting luminile.56

Acesta este ceea ce face ca asistenții AI să fie diferiți de însoțitorii artificiali, care sunt sisteme software și hardware create în mod special pentru compania socială. Exemple de însoțitori artificiali includ roboți precum Jibo, care combină funcționalitatea smart home cu aspectul de empatie, precum și chatbot comerciali precum Replika (fig. 6.3), o aplicație mobilă AI care promite utilizatorilor confort „dacă te simți dezamăgiți, sau anxioși sau pur și simplu au nevoie de cineva cu care să vorbească.”57 În timp ce Alexa, Siri și Asistentul Google sunt menite să se joace doar dacă utilizatorul dorește, se presupune că însoțitorii artificiali sunt programați să caute comunicare și implicare emoțională. Dacă este ignorat timp de câteva zile, de exemplu, chatbot-ul de companie Replika vine cu un mesaj prietenos, cum ar fi „Este totul în regulă?” sau exagerat de zelul „Sunt atât de recunoscător pentru tine și pentru zilele pe care le avem în față.”58 Alexa și Siri, pe de altă parte, au nevoie de incitare pentru a se angaja în glume sau glume – în mod coerent cu unul dintre pilonii computerului lor uman . design de interacțiune, prin care asistenții vorbesc numai dacă utilizatorii pronunță cuvântul de trezire. Acesta este, de asemenea, motivul pentru care designul boxelor inteligente care oferă servicii de asistență vocală în medii domestice, cum ar fi Amazon Echo, Google Home și Apple HomePod, este atât de minim. Asistenții trebuie să rămână fără întreruperi, întotdeauna în fundal și să intervină destul de politicos numai atunci când li se cere să facă acest lucru.59

Când nu sunt stimulați să acționeze ca însoțitori, asistenții vocali tratează intrările conversaționale ca îndemnuri pentru a executa anumite sarcini. Conversațiile cu asistenții AI profită, așadar, de faptul că limbajul, așa cum arată vorbirea
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Figura 6.3 Conversația autorului cu Replika, 30 decembrie 2019. Replika se mândrește cu 2,5 milioane de înscrieri raportate și o comunitate de aproximativ 30.000 de utilizatori pe grupul său de Facebook. Replika permite personalizarea genului (de exemplu, masculin, și nonbinar) și este programat să fie excesiv de supus și complementar utilizatorului, scopurile sale declarate fiind: „Vorbiți împreună”, „Îmbunătățiți bunăstarea mentală”, „Explorați-vă personalitatea” și "Să creștem împreună." (Luka Inc., „Replika”, 2019, disponibil la https://replika.ai/, preluat la 30 decembrie 2019.)



teoria actului, este, de asemenea, o formă de acțiune.60 După cum sa menționat în capitolul 3 în ceea ce privește arborele de dialog, unii au propus că limbajul natural este echivalent cu un limbaj de programare de nivel foarte înalt.61 Este ușor de văzut cum se aplică acest lucru în cazul interfețelor AI comunicative, cum ar fi asistenții.62 În calcul, fiecare linie de cod este tradusă în comenzi specifice de nivel inferior, până la operațiunile fizice efectuate la nivelul mașinii. În mod similar, atunci când utilizatorii îi cer lui Siri sau Alexa să „cali Mom” sau să „playe radio”, aceste intrări sunt traduse în instrucțiunile corespunzătoare în limbaje de programare de nivel inferior pentru a iniția funcțiile corespunzătoare.63 Un utilizator expert al asistenților vocali va afla care comenzi sunt cele mai eficiente. - obțineți în mod eficient Alexa, Siri sau Asistentul Google să „înțeleagă” și să opereze
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în consecință — similar modului în care un informatician memorează cele mai frecvente comenzi specifice unui limbaj de programare.

Variabilitatea abordărilor asistenților vocali în ceea ce privește interacțiunea este un exemplu al trecerii de la decepția directă a chatbot-urilor în cadrul Premiului Loebner la o formă banală de decepție care, fidelă principiilor de design transparent și ușurință în utilizare, oferă utilizatorilor cel puțin aspectul controlului.64 Când sunt aprinși de interogări adecvate, Siri, Alexa și Asistentul Google se angajează în forme de socialitate simulată. Când sunt abordați cu o cerere, ei revin la rolul lor de asistenți docili, sileni controlați prin cel mai accesibil dintre toate limbajele de programare: limbajul natural. În acest proces, utilizatorii experimentează atât controlul, cât și lipsa acestuia. Pe de o parte, ei sunt în ultimă instanță responsabili pentru stabilirea tonului și a domeniului conversațiilor. Pe de altă parte, au o perspectivă limitată asupra mecanismelor înșelătoare ale asistenților AI, care sunt încorporate în cod care este obscur pentru majoritatea utilizatorilor și se bazează pe grade fără precedent de cunoștințe despre utilizatorii înșiși. Acumularea neîncetată de date despre comportamentul utilizatorilor, de fapt, asigură că Apple, Amazon și Google pot gestiona echilibrul delicat între astfel de nevoi contrastante: acordând iluzia controlului utilizatorilor, păstrând în același timp controlul real pentru ei înșiși.

GĂSIREA INFORMAȚIILOR, ASISTENȚI VOCALI ȘI FORMA INTERNETULUI

Atât procesarea vorbirii, cât și gestionarea conversației sunt exemple de „definiție scăzută” a asistenților vocali. Pe de o parte, procesarea vocii necesită ca utilizatorii să contribuie la construirea personalității asistentului prin stereotipuri. Pe de altă parte, rutinele conversaționale ale asistenților AI se adaptează la întrebările utilizatorilor, oferind diferite modalități de interacțiune și lăsând utilizatorilor iluzia controlului asupra experienței. În schimb, cel de-al treilea sistem – regăsirea informațiilor – are mai mult de-a face cu sarcinile pe care asistenții vocali sunt capabili să le îndeplinească decât cu percepțiile utilizatorilor despre sistemele de calcul. Cu toate acestea, există o legătură strânsă între caracterul aparent neutru și banal al operațiunilor de regăsire a informațiilor și nivelul general de reprezentare al fiecărui asistent, care, la rândul său, ajută la înțelegerea modului în care utilizatorilor le este retras controlul asupra sistemelor de calcul în rețea cu care interacționează.

Termenul de regăsire a informațiilor se referă la Sisteme care permit localizarea informațiilor relevante pentru anumite interogări sau căutări.65 Găsirea informațiilor reglementează funcționarea motoarelor de căutare web, cum ar fi Căutarea Google și, mai general, regăsirea informațiilor pe web.
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Cu toate acestea, s-a acordat puțină atenție faptului că regăsirea informațiilor joacă, de asemenea, un rol cheie în asistenții vocali. Dacă funcționează corect, asistenții vocali precum Alexa, Siri și Google Assistant trebuie să fie în mod constant conectați la internet, prin intermediul căruia recuperează informații și accesează servicii și resurse. Accesul la Internet permite acestor sisteme să îndeplinească funcții care includ răspunsul la întrebări, furnizarea de informații și știri, transmiterea în flux a muzicii și a altor media online, gestionarea comunicațiilor — inclusiv e-mailurile și mesajele — și controlul dispozitivelor inteligente din casă, cum ar fi luminile sau sistemele de încălzire.66 Asistenții vocali sunt cu greu examinați în ceea ce privește natura interfețelor pe care le folosesc și care oferă acces la resurse bazate pe Internet, în cele din urmă sunt tehnologii care oferă noi căi de navigare pe web prin intermediul unor corporații uriașe și a serviciilor lor cloud. Pe măsură ce asistenții vocali intră din ce în ce mai mult în uz public, ei informează și modul în care utilizatorii folosesc, percep și înțeleg web-ul și alte resurse.

Una dintre caracteristicile cheie ale web-ului este cantitatea uriașă de informații care este accesibilă prin intermediul acestuia.67 Pentru a naviga într-o masă atât de impunătoare de informații, utilizatorii folosesc interfețe care includ browsere, motoare de căutare și rețele sociale. Fiecare dintre aceste interfețe ajută utilizatorul să identifice și să se conecteze la anumite pagini web, media și servicii, limitând astfel concentrarea la o gamă mai gestionabilă de informații care ar trebui să fie adaptate utilizatorului sau pentru utilizator.

Într-o oarecare măsură, toate aceste interfețe ar putea fi văzute ca dând putere utilizatorilor, deoarece îi ajută să recupereze informațiile de care au nevoie. Cu toate acestea, aceste interfețe au și propriile părtiniri, care corespund unei pierderi de control din partea utilizatorului. Motoarele de căutare, de exemplu, indexează nu toate, ci doar părți ale web, influențând vizibilitatea diferitelor părți de informații pe baza unor factori, inclusiv locație, limbă și căutări anterioare.68 De asemenea, rețelele sociale precum Facebook și Twitter influențează accesul la informații, datorită algoritmilor care decid asupra apariției și clasificării diferitelor postări, precum și a „bulei de filtrare” prin care utilizatorii tind să se distanțeze de informațiile care nu se aliniază cu punctele lor de vedere.69 Din acest motiv, cercetătorii, deoarece apariția web-ului, s-au tot interogat dacă și în ce măsură diferite instrumente de navigare web facilitează sau împiedică accesul la o pluralitate de informații.70 Aceeași întrebare trebuie pusă urgent și asistenților vocali. Construind o persoană în interfață, asistenții vocali mobilizează reprezentări specifice, în timp ce reduc controlul utilizatorilor asupra accesului lor la web, punând în pericol capacitatea acestora de a naviga, explora și regăsi o multitudine de informații disponibile pe web.
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O comparație între motorul de căutare Google și asistentul vocal Google Assistant este utilă în acest moment. Dacă utilizatorii caută un articol în motorul de căutare, spuneți „romantism”, aceștia sunt direcționați către intrări personalizate din Wikipedia și Oxford English Dictionary, alături de o multitudine de alte surse. Deși studiile arată că majoritatea utilizatorilor trec rar dincolo de prima pagină a rezultatelor unui motor de căutare, interfața permite totuși utilizatorilor să răsfoiască cel puțin câteva dintre cele 16.400.000 de rezultate preluate prin căutarea lor.71 Aceeași intrare dată Asistentului Google (la cel puțin, versiunea Google Assistant de pe telefonul meu) legat doar la pagina Wikipedia pentru „Romantism”, mișcarea artistică. Sistemul ignoră alte semnificații pentru aceleași cuvinte în căutarea inițială și privilegiază o singură sursă. Dacă părtinirea algoritmilor Google se aplică atât motorului de căutare, cât și asistentului virtual, în Google Assistant navigarea este complet ștearsă și înlocuită cu triumful căutărilor „mă simt norocos” care oferă o singură rezultat. Datorită timpului care ar fi necesar pentru a oferi mai multe răspunsuri potențiale prin voce, restrângerea relativă a opțiunilor trebuie considerată nu doar o alegere de design, ci o caracteristică a asistenților vocali ca mediu.

Emily MacArthur a subliniat că un instrument precum Siri „restaurează un sentiment de autenticitate în domeniul căutării pe Web, făcându-l mai mult ca o conversație între oameni decât o interacțiune cu un computer.”72 Cu toate acestea, ne întrebăm dacă acest „simț”. de autenticitate” este o modalitate prin care asistenții vocali să pară a fi în slujba utilizatorilor, pentru a-i face pe utilizatori să uite că „asistenții” lor sunt în slujba companiilor care i-au dezvoltat. În ciuda personajelor lor imaginare, „Alexa”, „Siri” și „Asistent Google” nu există niciodată de la sine. Ele există doar încorporate într-un sistem ascuns de structuri materiale și algoritmice care garantează dominația pieței companiilor precum Amazon, Apple și Google.73 Sunt porți de acces către resursele bazate pe cloud administrate de aceste companii, erodând distincția dintre web și serviciile cloud proprietare care sunt controlate de aceste corporații uriașe. Această eroziune se realizează printr-o interacțiune strânsă între reprezentarea pusă în scenă de personajul digital întruchipat de fiecare asistent și modelul de afaceri al companiei respective.

Este surprinzător să observăm că caracterizarea specifică a fiecărui asistent vocal este strict legată de afacerile generale și abordările de marketing ale fiecărei companii. Alexa este prezentată ca un slujitor docil, capabil să locuiască în spațiile domestice fără a Depăși granițele dintre „stăpân” și „slujitor”. Acest lucru contribuie la ascunderea structurilor problematice de muncă ale Amazon și a existenței precare a lucrătorilor care susțin funcționalitatea platformei.74 Astfel, comportamentul docil al lui Alexa contribuie la a face exploatarea forței de muncă Amazon invizibilă pentru clienții-utilizatori.
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care accesează serviciile Amazon Prime și comerțul online prin Alexa. La rândul său, Siri, în comparație cu ceilalți asistenți principali, este cea care folosește cel mai pe larg ironia. Acest lucru ajută la coroborarea imaginii corporative a Apple a creativității și unicității, pe care Apple încearcă să o proiecteze în auto-reprezentarea clienților săi: „stai foame, fii prost”, așa cum se spune într-o renumită linie de marketing Apple.75 Spre deosebire de Apple și Amazon, Google a ales pentru a oferi asistentului lor markeri mai puțin evidenti de identitate personală, evitând chiar și utilizarea unui nume.76 Ceea ce pare a fi un refuz de a caracteriza asistentul reflectă, de fapt, strategia de marketing mai largă a Google, care a minimalizat întotdeauna elementele de personalitate ( gândiți-vă la profilul scăzut, în comparație cu Steve Jobs de la Apple sau Jeff Bezos de la Amazon, al fondatorilor Google, Larry Page și Sergei Brin) pentru a prezenta Google ca un oracol cvasi-imanent care aspiră să devină imposibil de distins de web.77 Asistentul Google perpetuează acest lucru. reprezentare oferindu-se ca o entitate atotștiutoare care promite să aibă un răspuns pentru toate și este „gata să ajute, oriunde te-ai afla.”78

În loc să fie separat de operațiunile efective pe care le efectuează asistenții vocali, construirea personalității asistentului este menită să alimenteze afacerile corporațiilor. De fapt, prin prisma Siri sau Alexa, nu există nicio diferență substanțială între web și serviciile bazate pe cloud administrate de Apple și Amazon.79 Deși interfețele sunt uneori văzute ca secundare comunicării care rezultă prin ele, ele contribuie puternic. pentru a modela experiențele utilizatorilor. Din acest motiv, natura interfețelor asistenților vocali trebuie luată în serios. La fel ca metaforele și reprezentările evocate de alte interfețe, construcția personajului asistentului nu este neutră, ci informează însuși rezultatul comunicării. Oferind acces la web, asistenții vocali îl remodelează și îl transformă în ceva care răspunde mai îndeaproape la cum doresc companii precum Amazon, Apple și Google să arate pentru clienții lor.

A AMA ȘI A NU A AMAȘI

Asistenții vocali reprezintă un nou pas către convergența dintre inteligența artificială și interacțiunea om-calculator.80 După cum au arătat cercetătorii din studiile media, toate interfețele folosesc metafore, tropi narativi și alte forme de reprezentare pentru a orienta interacțiunile dintre utilizatori și mașini către scopuri specifice.81 Interfețele Graphie, de exemplu, folosesc metafore precum desktopul și coșul, construind un mediu virtual care ascunde complexitatea sistemelor de operare prin prezentarea elementelor.
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cunoscut utilizatorului. Metaforele și tropii manifestate în interfață informează construcțiile imaginare prin care oamenii percep, înțeleg și își imaginează cum funcționează tehnologiile de calcul.82

La asistenții vocali, nivelul de reprezentare coincide cu construcția unei „persone” care întărește sentimentul utilizatorului de o relație continuă cu asistentul. Acest lucru adaugă și mai multă complexitate interfeței, care încetează să mai fie doar un punct de intersecție între utilizator și computer și își asumă rolul atât de canal, cât și de producător de comunicare. Sensul literal al mediumului, „ce este între” în latină, este subminat de asistenții AI care reconfigurează medierea ca un proces circular în care mediul acționează simultan ca punct final al procesului de comunicare. O interacțiune cu un asistent AI, în acest sens, are ca rezultat crearea unei distanțe suplimentare între utilizator și informațiile preluate de pe web prin managementul indirect al interfeței în sine.

Acest capitol a arătat modul în care această distanțare este creată prin aplicarea decepției banale la asistenții vocali. Mobilizând o multitudine de sisteme tehnice și strategii de proiectare, asistenții vocali reprezintă continuarea unei traiectorii mai lungi în IA comunicativă. După cum sa arătat în capitolele anterioare, proiectarea interfeței computerului a apărut ca o formă de colaborare în care utilizatorii nu „cad” atât de mult în decepție, cât participă la construirea reprezentării care creează însăși capacitatea lor de interacțiune cu sistemele de calcul. În conformitate cu acest mecanism, există o ambivalență structurală în asistenții AI care rezultă din schimburile complexe dintre software și utilizator, prin care mașina este adaptată la om, astfel încât omul să își poată proiecta propriile semnificații în mașină.

Asistenții vocali precum Alexa și Siri nu încearcă să păcălească pe nimeni să creadă că sunt oameni. Totuși, așa cum am arătat, funcționarea lor este strict legată de o formă banală de decepție care beneficiază de inovațiile tehnice de ultimă oră în rețelele neuronale, precum și de strategiile dramaturgice stabilite de-a lungul deceniilor de experiență în IA comunicativă. În ciuda faptului că nu sunt credibili ca oameni, asistenții vocali sunt încă capabili să ne păcălească. Aceasta pare o contradicție doar atâta timp cât se crede că decepția implică o decizie binară: dacă suntem, cu alte cuvinte, fie „păcăliți”, fie „nu păcăliți”. Atât istoria inteligenței artificiale, cât și istoria mai lungă a mass-media demonstrează că nu este cazul - că tehnologiile încorporează decepția în moduri mai nuanțate și mai oblice decât se recunoaște de obicei.

În viitor, dinamica proiecției și reprezentării încorporate în proiectarea asistenților vocali ar putea fi folosite ca mijloace de manipulare.
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și persuasiune. După cum notează Judith Donath, este probabil ca asistenții AI și însoțitorii virtuali în viitor să fie monetizați prin publicitate, la fel cum publicitatea a reprezentat un venit crucial pentru alte medii de consum în masă, de la televiziune și ziare la motoarele de căutare web și rețelele sociale. .83 Acest lucru ridică întrebarea cum ar putea fi manipulate sentimente precum empatia, trezite de IA prin decepție banală, pentru a convinge utilizatorii să cumpere anumite produse sau, și mai îngrijorător, să voteze pentru un anumit partid sau candidat. Mai mult decât atât, întrucât asistenții vocali AI sunt, de asemenea, interfețe prin care oamenii accesează resurse bazate pe Internet, trebuie să ne întrebăm cum decepția banală poate informa accesul la informații de pe web – mai ales având în vedere că Alexa, Siri și altele asemenea sunt toate tehnologiile proprietare care privilegiază serviciile bazate pe cloud și prioritățile companiilor lor respective.

În loc să se limiteze la cazul asistenților vocali, unele dintre dinamicele examinate în acest capitol se extind la o gamă largă de tehnologii bazate pe inteligență artificială. Pe lângă IA conversațională „de vârf”, cum ar fi Siri, Alexa și Google Assistant, au apărut o mulțime de asistenți virtuali, chatboți, roboți de rețele sociale, roboți de e-mail și însoțitori AI, preconizați să lucreze în domenii mai mult sau mai puțin specifice și să îndeplinească sarcini diverse. în ultimii câțiva ani.84 În timp ce doar câțiva dintre ei ar putea fi programați să întreprindă forme de înșelăciune deliberată și directă în contexte precum phishingul sau campaniile de dezinformare, mulți încorporează în proiectarea lor mecanisme înșelătoare similare cu cele evidențiate în acest capitol. Implicațiile, așa cum se discută în concluzie, sunt mai largi și mai complexe decât orice tehnologie AI.
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Concluzie

Sinele nostru sofisticat

De la începuturile sale, AI a fost în centrul controverselor necontenite.

Informaticienii, psihologii, filozofii și publiciștii au susținut, în diferite momente ale istoriei sale, că promisiunea de a obține AI a fost o iluzie, dacă nu chiar o șmecherie. ceea ce nu a fost încă realizat în prezent s-ar putea întâmpla în viitor și indicând numeroasele realizări practice ale câmpului.2 Există un punct final al acestei controverse? Problema, așa cum a intuit Turing în 1950, este că sensul termenului AI poate varia enorm. Poate fi folosit pentru a descrie software-ul care îndeplinește sarcini în domenii foarte specifice, precum și pentru a imagina visul unei IA „generale” sau „puternice” care egalează oamenii în toate tipurile de activități și sarcini. Poate fi interpretat ca o simplă simulare a inteligenței sau ca un proiect de a insufla conștiința în mașini.3 Atâta timp cât rămâne atât de dificil să-și convină înțelesul, este probabil ca IA să continue să atragă controverse.

Adesea, soluția la o problemă aparent de nerezolvat este să alegeți o abordare complet diferită. În această carte, am susținut că întrebarea dacă AI este reală sau o decepție este prost pusă, deoarece decepția este în sine o componentă centrală a AI. Intrând în dialoguri cu asistenții vocali sau interacționând cu roboții pe rețelele de socializare, utilizatorii rareori vor confunda mașina cu un om. Acest lucru nu înseamnă, totuși, că decepția nu are loc, deoarece aceste instrumente mobilizează mecanisme precum empatia, stereotipurile și obiceiurile anterioare de interacțiune pentru a ne modela percepțiile și utilizările AI. Am propus conceptul de deception banală pentru a se referi la mecanismele de
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deception care sunt mai subtile și mai omniprezente decât sugerează opoziția rigidă dintre autenticitate și amăgire. Prin urmare, întrebarea nu este atât dacă AI va ajunge la conștiință sau va depăși inteligența umană, cât și cum ne putem adapta relațiilor cu tehnologiile care se bazează nu numai pe puterea de calcul, ci și pe răspunderea noastră de a fi înșelați.

Abordarea mea este în continuitate cu încercările recente din studiile de comunicare și media de a lua în considerare mai îndeaproape modul în care utilizatorii înțeleg computerul și algoritmii și modul în care astfel de înțelegeri informează rezultatul interacțiunilor lor cu tehnologiile digitale.4 Susțin, în acest sens, că modurile în care oamenii reacționează la mașinile care sunt programate să reproducă aspectul comportamentelor inteligente reprezintă un element constitutiv al ceea ce se numește în mod obișnuit AI. Tehnologiile de inteligență artificială nu sunt concepute doar pentru a interacționa cu utilizatorii umani, ci sunt concepute pentru a se potrivi cu caracteristici specifice ale modului în care utilizatorii percep și navighează în lumea externă. IA comunicativă devine mai eficientă nu numai prin evoluția din punct de vedere tehnic, ci și prin profitarea de semnificațiile sociale pe care oamenii le proiectează asupra situațiilor și lucrurilor.

De-a lungul cărții, am avut o grijă deosebită să subliniez că decepția banală nu este cu forță rău intenționată, deoarece aduce întotdeauna o anumită formă de valoare utilizatorului. Cu toate acestea, faptul că decepția banală îmbunătățește funcționalitatea interacțiunilor cu AI nu înseamnă că aceasta este lipsită de probleme și riscuri. Dimpotrivă, tocmai pentru că sunt atât de subtile și greu de recunoscut, efectele decepției banale sunt mai profunde și mai ample decât orice formă de amăgire directă. Însușindu-și dinamica decepției banale, dezvoltatorii AI au potențialul de a afecta structurile mai profunde ale vieții și experiențele noastre sociale.

O provocare crucială are de-a face cu faptul că decepția banală poartă deja în ea germenii decepției directe. Am arătat, de exemplu, cum dinamica proiecției și stereotipurilor le ajută asistenților vocali AI să se adapteze la obiceiurile și convențiile sociale existente. Organizațiile și indivizii pot exploata aceste mecanisme în scopuri politice și de marketing, bazându-se pe sentimentul de empatie pe care un asistent asemănător omului îl stimulează consumatorilor și alegătorilor.5 Alte mecanisme care stau la baza decepției banale pot fi folosite cu răutate sau în sprijinul agendelor greșite. Expunerea dinamicii decepției banale, în acest sens, oferă o altă modalitate de a expune cele mai supărătoare și problematice însuşiri ale IA și de a contracara puterea pe care o dețin asupra noastră algoritmii și datele administrate de instituțiile publice și private.

În capitolul 6, am întreprins o analiză critică a mecanismelor banale de decepție încorporate în asistenții vocali AI. Aceeași muncă analitică
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ar putea fi întreprinsă cu privire la alte tehnologii și sisteme AI.6 În ceea ce privește robotica, de exemplu, întrebarea este în ce măsură dinamica decepției banale care caracterizează asistenții vocali AI va fi încorporată în roboții care au o asemănare fizică cu oamenii. 7 În contrast cu definiția scăzută a asistenților AI, care folosesc comunicarea verbală sau scrisă pentru a interacționa cu oamenii, roboții viitorului se pot dezvolta într-un mediu „fierbinte” de înaltă definiție, care dizolvă distincția dintre decepția banală și deliberată. Pentru a face un alt exemplu, referitor la deepfakes (de exemplu, tehnologii bazate pe ΑΙ care produc videoclipuri sau imagini în care fața unei persoane este înlocuită cu asemănarea cuiva, astfel încât, de exemplu, persoane celebre sau politicieni să pară a pronunța cuvinte care nu au spus niciodată), impresia „banală” de realitate pe care o creează tehnologiile imaginilor în mișcare este ceea ce face ca decepția lor deliberată să fie atât de eficientă.8

Un fenomen important pe care această carte l-a atins doar marginal este proliferarea roboților pe rețelele sociale. În timp ce acest lucru a fost recent subiectul multă atenție, discuțiile s-au concentrat în cea mai mare parte asupra a ceea ce se întâmplă atunci când roboții pretinde să fie umani. Un exemplu interesant, în această privință, este chatbot-ul care se uită la premierul israelian Benjamin Netanyahu, care a fost folosit pe Facebook în alegerile din 2019. Deși utilizatorilor le-a fost destul de clar că chatbot-ul nu era Netanyahu însuși, a fost în continuare util să se creeze un sentiment de proximitate față de candidat, precum și să colecteze informații despre potențialii alegători care să fie vizați prin alte mijloace media.10

Chiar și atunci când nu este implicată nicio decepție deliberată, dezvoltarea IA comunicativă bazată pe decepție banală va provoca schimbări fără precedent în relațiile noastre cu mașinile și, mai larg, în viața noastră socială. Interacțiunile continue cu Alexa, Siri și alți asistenți inteligenți nu numai că îi fac pe utilizatori mai pregătiți să accepte că AI preia un număr tot mai mare de sarcini. Aceste interacțiuni influențează și capacitatea de a distinge schimburile care oferă doar o aparență de socialitate de interacțiunile care includ de fapt posibilitatea de empatie din partea interlocutorului nostru.11 Prin urmare, pe măsură ce mecanismele banale de decepție dispar în structura vieții noastre de zi cu zi. , va deveni din ce în ce mai dificil să menținem distincții clare între mașini și oameni la nivel social și cultural. Inteligența artificială influențează obiceiurile și comportamentele sociale, în plus, va implica și situații în care nu sunt implicate mașini. Există îngrijorări tot mai mari, de exemplu, că construcțiile stereotipe de gen, rasă și clasă încorporate în IA comunicativă stimulează oamenii să reproducă aceleași prejudecăți în alte
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contexte.12 De asemenea, interacțiunile dintre copii și IA pot modela relațiile lor nu numai cu computerele, ci și cu oamenii, redefinind dinamica contactelor sociale în interiorul și în afara familiei.13

Dezvoltarea tot mai mare a algoritmilor de învățare profundă și relația lor cu decepția banală necesită, de asemenea, o analiză suplimentară. După cum am arătat, decepția banală reiese din corpuri specifice de cunoștințe despre oameni, față de care mediul este adaptat unei anumite imagini a potențialilor utilizatori. Crearea de chatbot și roboți de rețele sociale mai credibili, de exemplu, necesită cunoștințe despre comportamentul conversațional uman; proiectarea de asistenți vocali mai eficienți se bazează pe cunoașterea modului în care oamenii reacționează la diferite tipuri de voci.14 Culegerea de cunoștințe despre utilizatori, totuși, nu este niciodată un proces neutru. Modelarea „umanului” împotriva căreia a apărut decepția banală a IA a exclus diferențele de gen, rasă și clasă, rezultând forme de părtinire și inegalitate care au fost încorporate în proiectarea tehnologiilor de calcul până în prezent. În acest context, învățarea profundă nu este doar semnificativă, deoarece avansează tehnologii precum procesarea vorbirii, simulând comportamentul verbal mai eficient decât oricând. Învățarea profundă este, de asemenea, semnificativă, deoarece, odată cu aceasta, modelarea utilizatorului este realizată în mod autonom de către rețelele neuronale. Mase mari de date despre comportamentele utilizatorilor sunt culese și folosite pentru „antrenarea” Sistemului, astfel încât acesta să poată îndeplini sarcini complexe.15 Prin urmare, se pune întrebarea: în ce măsură poate sau ar trebui să fie transferată modelarea omului care stă la baza decepției banale. la agentia de masini autonome?

Pentru a fi corect, faptul că modelarea omului poate fi construită algoritmic nu înseamnă că dezvoltatorii nu dețin niciun control asupra acestor sisteme. La urma urmei, funcționarea învățării profunde depinde strict de datele care sunt furnizate Sistemului. Posibilitatea de a analiza și corecta părtinirea acestor Sisteme este așadar întotdeauna deschisă. Supravegherea rețelelor neuronale este însă costisitoare și dificilă la nivel tehnic. Deoarece datele au devenit o formă de marfă cu valoare semnificativă, în plus, companiile și chiar instituțiile publice ar putea să nu fie pregătite să renunțe la potențialul beneficiu economic pe care îl implică utilizarea acestor date. Învățarea profundă, în acest sens, nu va face decât să facă mai urgentă și mai importantă nevoia de a lua în considerare impactul decepției banale - și al modelării umane pe care o implică.

Pentru a nu fi găsiți nepregătiți pentru aceste și alte provocări, informaticienii, dezvoltatorii de software și designerii trebuie să ia în considerare în serios rezultatele potențiale ale decepției banale. Acești experți ar trebui să dezvolte o serie de instrumente pentru a se asigura că decepția este limitată la aplicații care sunt cu adevărat funcționale și utile pentru utilizatori.
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Potrivit lui Joseph Weizenbaum, limitele aplicabilității IA „nu pot fi stabilite punând întrebări care încep cu „poate””, ci ar trebui să fie puse doar în termeni de „trebuie.”16 Dezvoltatorii de IA trebuie să reflecteze serios asupra problemei înşelăciune. Caliul de a dezvolta standarde profesionale mai stricte pentru comunitatea AI pentru a preveni producerea de sisteme înșelător „umane” nu este nou, dar trebuie să aibă loc dezbateri mai străine cu privire la problema decepției.17 Informaticienții și designerii de software ezită de obicei să folosesc termenul déception în referire la munca lor. Cu toate acestea, nu numai formele mai puțin subtile și deliberate de decepție trebuie să fie recunoscute și abordate ca atare. Recunoașterea încorporării decepției banale în AI calis pentru o etică a corectitudinii și transparenței între vânzător și utilizator care nu ar trebui să se concentreze doar pe potențialele utilizări greșite ale tehnologiei, ci și pe interogarea rezultatelor diferitelor caracteristici și mecanisme de proiectare încorporate în AI. De asemenea, comunitatea AI trebuie să ia în considerare principiile designului transparent și interfețelor ușor de utilizat, dezvoltând noi modalități de a face decepția evidentă și ajutând utilizatorii să navigheze mai bine în barierele dintre decepția banală și deliberată. Faptul că tehnologii precum procesarea vorbirii și generarea limbajului natural devin din ce în ce mai ușor accesibile indivizilor și grupurilor face ca aceste eforturi să fie și mai presante.

O complicație, în acest sens, este dificultatea de a atribui agenție și responsabilitate dezvoltatorilor de sisteme „inteligente”. După cum subliniază David Gunkel, „atribuirea vinovăției nu este atât de simplă pe cât ar putea părea la început”, mai ales pentru că avem de-a face cu tehnologii care stimulează utilizatorii să le atribuie agenție și personalitate.18 Cu toate acestea, software-ul este întotdeauna construit. cu acțiune în minte, iar programatorii urmăresc întotdeauna să producă un anumit rezultat.19 Deși este dificil de stabilit ce au avut în vedere creatorii de software, elemente ale acestuia pot fi reconstruite retrospectiv, trecând de la caracteristicile tehnice ale tehnologiei. și contextul economic și instituțional al producției sale – așa cum m-am străduit să fac prin analiza critică a asistenților vocali.

Atunci când întreprindem o astfel de muncă critică, ar trebui să ne amintim că orice reprezentare a utilizatorului – „omul” în jurul căruia dezvoltatorii și companiile construiesc tehnologii comunicative AI – este ea însăși rodul unei evaluări culturale afectate de propria sa părtinire și ideologie. De exemplu, decizia unei companii de a acorda un nume și o voce feminină ca implicite asistentului său vocal s-ar putea baza pe cercetări despre percepțiile oamenilor despre vocile masculine și masculine, dar această cercetare rămâne încorporată în regimuri metodologice și cadre culturale specifice.20 În sfârșit. , nu ar trebui să neglijăm faptul că utilizatorii înșiși au agenție, ceea ce poate submina și recadra
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orice așteptare sau previziune cu privire la rezultatele interacțiunilor om-mașină. Sublinierea rolului programatorilor și companiilor care produc și difuzează tehnologii AI nu ar trebui să conducă la negarea rolului activ al utilizatorilor. Dimpotrivă, decepția banală cere utilizatorului să se implice activ cu mecanismele înșelătoare, ceea ce face din utilizator o componentă activă, crucială în funcționarea fiecărui sistem AI interactiv.

În cele din urmă, ceea ce AI pune sub semnul întrebării este însăși esența a ceea ce suntem. Dar nu atât pentru că ne face să pierdem din vedere ce înseamnă să fii om. Mai degrabă, mesajul cheie al AI este că vulnerabilitatea noastră la decepție face parte din ceea ce ne definește. Oamenii au o capacitate distinctă de a proiecta intenția, inteligența și emoțiile asupra celorlalți. Aceasta este o povară la fel de mult ca o resursă: la urma urmei, aceasta este ceea ce ne face capabili să întreținem interacțiuni sociale semnificative cu ceilalți. Dar, de asemenea, ne face predispuși să fim înșelați de interlocutori non-umani care simulează intenția, inteligența și emoțiile.

Secretul pentru a naviga în decepția banală, în acest sens, constă în capacitatea noastră de a menține o poziție sceptică în interacțiunile cu computerele și mediile digitale. Refuzul de a se implica cu inteligența artificială nu este, din păcate, o opțiune reală: chiar dacă cineva se deconectează de la toate dispozitivele, inteligența artificială va continua să-și informeze viața socială în mod indirect prin impactul pe care îl are asupra celorlalți.21 Totuși, ceea ce putem căuta este un echilibru între capacitatea noastră, pe de o parte, de a profita de instrumentele pe care AI le pune la dispoziție și capacitatea noastră, pe de altă parte, de a adopta o atitudine informată și reflexivă față de AI. Pentru a realiza acest lucru, trebuie să rezisem la normalizarea mecanismelor înșelătoare încorporate în IA contemporană și la puterea sileni pe care companiile media digitale o exercită asupra noastră. Nu ar trebui să încetăm să interogăm cum funcționează tehnologia, chiar dacă încercăm să o adaptăm în structura vieții de zi cu zi. După cum a subliniat Margaret Boden, rezultatul oricărei forme de decepție depinde până la urmă de sofisticarea utilizatorului.22 Cele mai sofisticate tehnologii, așadar, ne cer să urmărim, devenind noi înșine din ce în ce mai sofisticați.
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NOTE

INTRODUCERE

1. 	„Google’s AI Assistant Can Now Маке Real Phone Calis”, 2018, disponibil la https://www.youtube.com/watch?v=JvbHu_bVa_g&time_ continue=l&app=desktop (preluat la 12 ianuarie 2020). Vezi și O'Leary, „Google's Duplex”.

2. 	Așa cum a spus expertul critic în media Zeynep Tufekci într-un tweet care a circulat pe scară largă. Firul complet de pe Twitter poate fi citit la https://twitter.com/zeynep/status/ 994233568359575552 (preluat la 16 ianuarie 2020).

3. 	Joël Hruska, „Did Google Fake Its Duplex AI Demo?”, ExtremeTech, 18 martie 2018, disponibil la https://www.extremetech.com/computing/269497-did-google-fake-its-google-duplex- ai-demo (preluat la 16 ianuarie 2020).

4. 	Vezi, printre multe altele, pe de o parte, Minsky, „Inteligenta artificiala”; Kurzweil, Singularitatea este aproape; iar pe de altă parte, Dreyfus, What Computers Can'tDo; Smith, Amăgirea AI.

5. 	Smith și Marx, Does Technology Drive History?; Williams, Televiziune; Jones, „Tehnologia nu este forma culturală?”

6. 	Goodfellow, Bengio și Courville, Deep Learning.

7. 	Benghozi și Chevalier, „The Present Vision of AI... or the HAL Syndrome.”

8. 	Vezi capitolul 2.

9. 	Gombrich, Artă și iluzie.

10. 	Există, totuși, unele excepții relativ izolate, dar încă semnificative. Adar, Tan și Teevan, de exemplu, disting între decepția răuvoitoare și binevoitoare, pe care o descriu drept „înșelăciune menită să beneficieze atât utilizatorului, cât și dezvoltatorului”. O astfel de formă binevoitoare de înșelăciune, notează ei, „este omniprezentă în proiectele sistemelor din lumea reală, deși este rareori descrisă în astfel de termeni”. Adar și colab., „Benevolent Deception în Human Computer Interaction”,

1. 	În mod similar, Chakraborti și Kambhampati observă că rezultatul evident al încorporării modelelor de stări mentale ale utilizatorilor umani în programele AI este că deschide posibilitatea manipulării. Chakraborti și Kambhampati, „Algoritmi pentru binele mai mare!” Dintr-o perspectivă diferită, Nake și Grabowski au conceptualizat comunicațiile dintre om și mașină ca „pseudo-comunicare”, argumentând pentru importanța unei perspective semiotice pentru a înțelege interacțiunea om-calculator. Nake și Grabowski, „Interacțiunea om-calculator privită ca pseudo-comunicare”. Vezi și Castelfranchi și Tan, Trust and Déception in Virtual Societies; Danaher, „Trădarea robotului”.

11. 	Coeckelbergh, „Cum să descrii și să evaluezi fenomenele de „înșelăciune””; Schuetzler, Grimes și Giboney, „The Effect of Conversațional Agent Skill on User Behavior during Deception”; Tognazzini, „Principiile, tehnicile și etica magiei scenice și aplicarea lor la proiectarea interfeței umane”.

12. 	DePaulo et al., „Lying in Everyday Life”; Steinel și De Dreu, „Motive sociale și denaturarea strategiei în procesul decizional social”; Solomon, „Sine, înșelăciune și înșelăciune de sine în filozofie”; Barnes, Vederea prin auto-înșelăciune. În străinătate, definiția tradițională a decepției este „a face să creadă ceea ce este fals”; vezi Mahon, „The Definition of Lying and Deception”.

13. 	Acland, Vizionare rapidă.

14. 	Martin, The Philosophy of Deception, 3; Rutschmann și Wiegmann, „Nu este nevoie de o intenție de a înșela?”

15. 	Wrathall, Heidegger și Unconcealment, 60.

16. 	Hoffman, The Case against Reality.

17. 	Pettit, Știința decepției.

18. 	Hyman, Psihologia decepției. Exemple notabile de studii timpurii despre decepție din perspectivă psihologică includ Triplett, „Psihologia conjurării decepțiilor”; Jastrow, Fapte și fabule în psihologie.

19. 	Parisi, Arheologiile atingerii; Littlefield, The LyingBrain; Alovisio, „Lo schermo di Zeusi”; Sterne, Trecutul audibil.

20. 	Martin, The Philosophy of Deception, 3.

21. 	Caudwell și Lacey, „Ce vor roboții de acasă?”

22. 	Atributul „banal” a fost aplicat în științele sociale cu privire la alte subiecte, mai faimos de Michael Billig cu teoretizarea sa perspicace a „naționalismului banal”. Deși există câteva puncte de analogie cu conceptul de deception banală, în special în ceea ce privește caracterul său cotidian și faptul că naționalismul banal este adesea trecut cu vederea și nu interogat ca atare, naționalismul banal a fost, în general, o sursă utilă de inspirație, mai degrabă decât o sursă directă. referință pentru a-mi dezvolta teoria. Vezi Billig, Naționalismul banal; precum și Hjarvard, „The Mediatisation of Religion”, care propune noțiunea de „religie banală” cu referire specifică la opera lui Billig.

23. 	Vezi, printre altele, Guzman, „Imagining the Voice in the Machine”; Reeves și Nass, The Media Equation; Turkle, Al doilea Sine.

24. 	Guzman, „Dincolo de extraordinar”.

25. 	Ekbia, Vise artificiale; Finn, ce vrea algoritmul.

26. 	Guzman, „Beyond Extraordinary”, 84.

27. 	Papacharissi, Un Sine în Rețea și Augmentică Umană, Inteligență Artificială, Sentință.

28. 	Chun, „Despre „Sursă” sau Cod ca fetiș.”

29. 	Negru, „Util și util”.

30. 	Porcheron et al., „Voice Interfaces in Everyday Life”; Guzman, Imaginând vocea în mașină.

31. 	Nass și Moon, „Mașini și lipsă de minte”; Kim și Sundar, „Antropomorfismul computerelor”.

32. 	Langer, „Matters of Mind”, 289.

33. 	Guzman, „Making AI Safe for Humans”.

34. 	Negru, „Util și util”.

35. 	Ortoleva, Miti a bassa intensità. Marshall McLuhan folosește noțiunea de „media cool” pentru a descrie astfel de mass-media. McLuhan, UnderstandingMedia.

36. 	Guzman, Imagining the Voice in the Machine.

[134] Note

37. 	Нерр, „Companioni artificiali, boți sociali și boți de lucru”. Despre discuțiile despre percepțiile roboților, a se vedea conceptul de „vale nemaipomenită”, propus inițial în Mori, „Valea neobișnuită” (textul original în japoneză a fost publicat în 1970). De asemenea, este de remarcat faptul că asistenții vocali AI sunt „decorporați” doar în măsura în care nu li se oferă un „corp” fizic adecvat ale cărui mișcări le controlează, ca la roboți; cu toate acestea, orice software are într-o oarecare măsură propria sa materialitate, iar asistenții vocali AI în special sunt întotdeauna încorporați în artefacte materiale, cum ar fi smartphone-urile sau difuzoarele inteligente. A se vedea, despre materialitatea software-ului, Kirschenbaum, Mecanisme, și în special despre asistenții vocali AI, Guzman, „Vocile în și din mașină”.

38. 	Akrich, „Descrierea obiectelor tehnice”. Vezi și Feenberg, Transforming Technology; Forsythe, studiind pe cei care ne studiază.

39. 	Chakraborti și Kambhampati, „Algoritmi pentru binele mai mare!”

40. 	În mod interesant, decepția joacă un rol cheie nu numai în modul în care sunt utilizate cunoștințele despre psihologia și percepția umană, ci și în modul în care sunt colectate și acumulate. Formele de decepție, de fapt, au jucat un rol cheie în conceperea studiilor psihologice experimentale, astfel încât să inducă în eroare participanții în așa fel încât să nu fie conștienți de scopurile reale ale unui studiu. Vezi Korn, Iluziile realității.

41. 	Balbi și Magaudda, A History of Digital Media.

42. 	Bûcher, Dacă. . . Apoi, 68.

43. 	Orașe, „Către o filozofie a mass-mediei negre”.

44. 	Sweeney, „Asistenți digitali”.

45. 	Bourdieu, Schița unei teorii a practicii.

46. 	Guzman, „Mesajele mașinilor mute”.

47. 	Pentru o descriere clară și convingătoare a misiunilor „AI comunicative”, a se vedea Guzman și Lewis, „Artificial Intelligence and Communication”.

48. 	Hepp, „Companioni artificiali, roboții sociali și boții de lucru”.

49. 	Guzman, Comunicarea om-mașină; Gunkel, „Comunicare și inteligență artificială”; Guzman și Lewis, „Inteligenta artificială și comunicare”. Pentru o discuție despre conceptul de mediu în studiile despre IA și comunicare, a se vedea Natale, „Comunicare cu și comunicare prin intermediul”.

50. 	Doane, Apariția timpului cinematografic; Hugo Münsterberg, Filmul: un studiu psihologic.

51. 	Sterne, Trecutul audibil; Sterne, MP3. Chiar și scriitori importanți, precum Edgar Allan Poe în „Filosofia compoziției”, au examinat capacitatea literaturii de a obține efecte psihologice prin mijloace stilistice specifice. Poe, Corbul; cu, Filosofia compoziţiei.

52. 	După cum arată, de exemplu, controversa despre Google Duplex menționată la începutul acestei introduceri.

53. 	Bottomore, „The Panicking Audience?”; Martin Loiperdinger, „Lumières Arrivai of the Train”; Sirois-Trahan, „Mythes et limites du train-qui-fonce-sur-les-spectateurs”.

54. 	Pooley și Socolow, „Războiul cuvintelor”; Heyer, „America sub Attack I”; Hayes și Battles, „Schimb și interconectare în rețeaua radio din SUA”.

55. 	Există, totuși, excepții importante; dintre Lucrările de istorie a mass-media care au contribuții importante la studiul decepției și mass-media, merită menționat Sconce, The Technical Delusion; Acland, Vizionare rapidă.

56. 	Vezi, de exemplu, McCorduck, Machines Who Think; Boden, Mintea ca mașină.
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57. 	Riskin, „The Defecating Duck, or, the Ambiguous Origins of Artificial Life”; Sussman, „Performing the Intelligent Machine”; Cook, The Arts of Deception.

58. 	Geoghegan, „Visionăre Informatik.” Sussman, „Performing the Intelligent Machine”.

59. 	Gitelman, Always Already New; Huhtamo, Iluzii în mișcare; Parikka, Ce este arheologia media?

60. 	Acesta este motivul pentru care predicțiile despre tehnologie eșuează atât de des. Vezi aici Ithiel De Sola Pool et al., „Foresight and Hindsight”; Natale, „Introducere: New Media și imaginația viitorului”.

61. 	Park, Jankowski și Jones, The Long History ofNew Media; Balbi și Magaudda, O istorie a media digitală.

62. 	Suchman, Reconfigurari om-mașină.

63. 	Pentru un exemplu influent, vezi Licklider și Taylor, „The Computer as a Communication Device”.

64. 	Appadurai, Viața socială a lucrurilor; Geli, Artă și Agenție; Latour, Pasteurizarea Franței.

65. 	Edwards, „Ființe materiale”.

66. 	Reeves și Nass, The Media Equation.

67. 	Vezi, printre multe altele, Nass and Brave, Wired for Speech; Nass și Moon, „Mașini și lipsă de minte”.

68. 	Cele mai reprezentative lucrări ale lui Turkle sunt Reclaiming Conversation; Singur împreună; Obiecte evocatoare; Al Doilea Sine; Viața pe ecran.

CAPITOLUL 1

1. 	Citat în Monroe, Laboratories of Faith, 86. Vezi și Natale, Supernatural Entertainments.

2. 	Noakes, „Telegrafia este o artă oculta”.

3. 	„Faraday în mișcarea mesei”.

4. 	Crevier, AI; McCorduck, Mașini care gândesc; Nilsson, Căutarea inteligenței artificiale.

5. 	Martin, „The Myth of the Awesome Thinking Machine”; Ekbia, Vise artificiale; Boden, Mintea ca mașină.

6. 	Shieber, Testul Turing; Saygin, Cicekli și Akman, „Testul Turing”.

7. 	Crevier, AI.

8. 	Unele dintre biografiile acestor gânditori sunt un punct de acces excelent la viețile, contribuțiile și gândirea lor, precum și la istoria timpurie a AI și a computerului. Vezi în special Soni și Goodman, A Mind at Play; Conway și Siegelman, Dark Него al era informației; Copeland, Turing.

9. 	McCulloch și Pitts, „A Logicai Calculus of the Ideas Immanent in Nervous Activity.”

10. 	Wiener, Cibernetica. Cu toate acestea, Wiener credea că operațiunile digitale nu pot explica toate procesele chimice și organice care au avut loc în organismul uman și a susținut includerea proceselor de natură analogică pentru a studia și a reproduce mintea umană.

11. 	Nagel, „Cum este să fii un liliac?” Filosoful John Searle a prezentat o respingere influentă a testului Turing pe baza unei perspective similare. Într-un articol publicat în 1980, Searle și-a imaginat un experiment de gândire numit Camera chineză, în care ar putea fi scris un program de calculator pentru a participa la o conversație în chineză atât de convingător încât un vorbitor nativ de chineză l-ar schimba cu o ființă umană. El a motivat că o persoană care nu a vorbit
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Chinezii ar putea face același lucru stând în „camera chineză” și urmând același cod de instrucțiuni prin care a funcționat programul. Cu toate acestea, chiar dacă ar putea trece testul Turing, această persoană nu ar fi capabilă să înțeleagă chineza, ci doar să simuleze o astfel de înțelegere, oferind rezultate corecte pe baza codului de reguli. Searle a considerat că aceasta este o demonstrație că computerul nu va „înțelege” corect nici chineza. El a folosit Camera Chineză pentru a contracara afirmațiile umflate cu privire la posibilitatea de a construi „mașini de gândire” care au caracterizat o mare parte din retorica în jurul AI până în prezent. El credea într-o diferență iremediabilă între inteligența umană și ceea ce putea fi obținut de mașini, ceea ce făcea din imitație singurul scop spre care AI-ul putea să vizeze în mod rezonabil. Searle, „Minți, creiere și programe”. Vezi, de asemenea, de ce este imposibil de știut ce se întâmplă în mintea altora și consecințele acestui fapt pentru dezbaterea despre AI, Gunkel, The Machine Question.

12. 	Accentul care se pune pe comportament, în loc de ceea ce se întâmplă „în interiorul mașinii”, a fost susținut nu numai de Turing, ci și de alte figuri cheie ale inteligenței artificiale timpurii, inclusiv Norbert Wiener, care a argumentat că „acum că anumite analogii ale comportamentului sunt observate. între mașină și organismul viu, problema dacă mașina este vie sau nu este, în scopul nostru, semantică și suntem liberi să răspundem într-un fel sau altul după cum ne convine cel mai bine.” Wiener, Utilizarea umană a ființelor umane, 32.

13. 	Turing, „Computing Machinery and Intelligence”, 433.

14. 	Luger și Chakrabarti, „De la Alan Turing la AI modem”.

15. 	Boiter, Omul lui Turing; despre testul Turing, calcul și limbaj natural, vezi Powers and Turk, Machine Learning of Natural Language, 255.

16. 	Pentru o privire de ansamblu asupra dezbaterii, incluzând texte critice cheie și răspunsuri la Turing, a se vedea Shieber, The Turing Test. Unii s-au întrebat dacă Turing a făcut acest lucru în mod intenționat pentru a se asigura că acest lucru va stârni reacții și dezbateri – astfel încât mulți să fie forțați să ia în considerare și să discute problema „inteligenței mașinilor”. Gandy, „Uman versus Medianica! Inteligență.”

17. 	Vezi, de exemplu, Levesque, Common Sense, Testul Turing și Quest for Real AL

18. 	Informaticianul și gânditorul critic Jaron Lanier a fost printre cei mai perceptivi în acest sens. După cum subliniază el, „ceea ce testul spune cu adevărat

noi . . . chiar dacă nu este neapărat ceea ce Turing spera că va spune, este că inteligența mașinii poate fi cunoscută doar într-un sens relativ, în ochii unui spectator uman.” În consecință, „nu poți să-ți dai seama dacă o mașină a devenit mai inteligentă sau dacă doar ți-ai coborât propriile standarde de inteligență într-o asemenea măsură încât mașina pare inteligentă”. Lanier, nu ești un gadget, 32 de ani.

19. 	După cum remarcă în mod perceptiv Jennifer Rhee, în testul Turing „onul succesului sau al eșecului nu se bazează numai pe abilitățile mașinii, ci este cel puțin parțial distribuit între mașină și om, dacă nu este localizat în primul rând în om”. Rhee, „Promisiunea de identificare greșită”.

20. 	Vezi, de exemplu, Levesque, Common Simț, testul Turing și Quest for Real AL

21. 	Turing, „Computing Machinery and Intelligence”, 441. După cum au observat Helena Granstrõm și Во Gõranzon, „Turing nu spune: la sfârșitul secolului, tehnologia va fi avansat atât de mult încât mașinile vor putea de fapt să gândească. El spune: înțelegerea noastră despre gândirea umană se va fi mutat către procesarea formalizată a informațiilor, în măsura în care nu va mai fi

Note [137]

posibil să-l distingem de un proces mecanic.” Granstrõm și Goranzon, „Omul lui Turing”, 23.

22. 	Acest argument a fost prezentat și în Hotărârea Weizenbaum, Computer Power and Human Reason.

23. 	Turkle, Life on the Screen, 24. Dinamica similară a schimbării percepțiilor culturale a fost observată de Turkle în alte studii care au analizat percepțiile copiilor și adulților despre mașinile de calcul. „Pentru copiii de astăzi, granița dintre oameni și mașini este intactă. Dar ceea ce văd ei peste graniță s-a schimbat dramatic. Acum, copiii se simt confortabil cu ideea că obiectele neînsuflețite pot să gândească și să aibă personalitate. Dar nu se mai îngrijorează dacă mașina este în viață. Ei știu că nu este” (83). În ceea ce privește adulții, studiile lui Turkle o duc la concluzia că „astăzi, controversa despre calculatoare nu se concentrează pe capacitatea lor de inteligență, ci pe capacitatea lor de viață” (84). Margaret Boden observă, de asemenea, schimbări în utilizarea cuvintelor pentru referire

la computere: „oamenii vorbesc acum despre computere în termeni psihologici ca pe o rutină, o problemă de zi cu zi.” Boden, Minds as Machines, 1356.

24. 	Vezi pe acest Lamont, Credințele extraordinare.

25. 	Peters, Vorbind în aer.

26. 	TuMe, Alone Together.

27. 	Ceruzzi, A History of Modem Computing.

28. 	Cu siguranță, ideea a persistat deja într-o cultură informatică în curs de dezvoltare. Susținătorii ciberneticii, de exemplu, au postulat oamenii și mașinile ca parte a unui sistem de comunicare și bucle de feedback care a anticipat în multe feluri evoluțiile care au urmat; vezi, de exemplu, Wiener, The Human Use of Human Beings. Dar puține, sau chiar deloc, scrierile timpurii despre computere au continuat să-și imagineze viitoare interacțiuni între computere și oameni într-un mod atât de viu precum „Computing Machinery and Intelligence” a lui Turing.

29. 	Garfinkel, Arhitecții Societății Informaționale.

30. 	Gunkel, Gamingthe System, 133.

31. 	Christian, The Most Human Human, 37. Vezi și Bratton, „Outing Artificial Intelligence: Reckoning with Turing Test”.

32. 	Enns, „Teoria informațiilor despre suflet”.

33. 	Turing, „Computer Machinery and Intelligence”, 434.

34. 	Gitelman, Scripturi, caneluri și mașini de scris; Kittler, gramofon, film, mașină de scris.

35. 	Prin realizarea unei comunicări anonime, neîncarnate, testul pune în prim plan și comunicarea mediată în Internet. Este într-adevăr firesc ca cititorul contemporan să asocieze designul testului cu situațiile întâlnite online. Într-o cameră de chat, un forum web sau pe rețelele de socializare, atunci când conversația este limitată la text și identitățile altor utilizatori sunt transmise prin puțin mai mult decât o poreclă și o imagine, nu putem fi complet sigur dacă utilizatorii sunt cine sau ce pretinde ei. a fi — ceea ce se potrivește destul de bine cu obiectivele testului Turing.

36. 	Copeland, The Essential Turing, 420.

37. 	McLuhan, Understanding Media.

38. 	Arheologul mass-media Erkki Huhtamo a demonstrat că aceste viziuni au fost declanșate de reflecții asupra potențialelor schimbări antropomorfe ca urmare a inovației tehnologice. Huhtamo, „Fotografiile elefanților”.

39. 	Copeland, The Essential Turing, 420.

40. 	Guzman, „Vocile în și ale mașinii”.
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41. 	„Turing însuși a fost întotdeauna atent să se refere la „joc”. Sugestia că ar putea fi un fel de test implică o extindere importantă a pretențiilor lui Turing.” Whitby, „Testul Turing”, 54.

42. 	Broussard, de exemplu, a subliniat recent că acest lucru se datorează faptului că informaticienilor „ tind să le placă anumite tipuri de jocuri și puzzle-uri”. Broussard, Artificial Unintelligence, 33. Vezi și Harnad, „The Turing Test Is Not a Trick”.

43. 	Johnson, Țara Minunilor.

44. 	Soni și Goodman, A Mind at Play; Weizenbaum, „Cum să Маке un computer să pară inteligent”; Samuel, „Câteva studii în învățarea automată folosind jocul dame”.

45. 	Newell, Shaw și Simon, „Programe de joc de șah și problema complexității”. Înainte de propunerea sa de Jocul Imitației, Turing a sugerat șahul ca un potențial banc de testare pentru AI. Turing, „Prelegere despre motorul de calcul automat”, 394; Copeland, The Essential Turing, 431.

46. 	Ensmensger, „Este șahul drosofila inteligenței artificiale?”

47. 	Kohler, Lords of the Fly.

48. 	Rasskin-Gutman, Metafore de șah; Dennett, „Sisteme intenționale”.

49. 	Ensmenger, „Is Chess the Drosophila of Artificial Intelligence?”, 7. Vezi și Burian, „How the Choice of Experimental Organism Matters: Epistemologica! Reflecții asupra unui aspect al Biologică! Practică."

50. 	Franchi, „Șah, jocuri și muște”; Ensmensger, „Este șahul drosofila inteligenței artificiale?”; Bory, „Deep New”.

51. 	După cum spune Galloway, „fără acțiune, jocurile rămân doar în paginile unei cărți de reguli abstracte”; Galloway, Gaming, 2. Vezi și Fassone, Every Game Is an Island. În plus, unul dintre principiile teoriei jocurilor este că, chiar dacă acțiunile jucătorilor pot fi formalizate ca o matematică! teoria strategiilor eficiente, doar jocul propriu-zis activează formalizarea abstractă a unui joc. Juul, semi-real.

52. 	Friedman, „Making Sense of Software”.

53. 	Laurel, Calculatoarele ca teatru,!.

54. 	Galloway, Gaming, 5. O critică a acestui argument indică problema intenționalității și cadrul prin care situațiile și acțiunile specifice sunt înțelese și interpretate. În timp ce la nivelul comportamentului observat, computerul și jucătorii umani pot arăta la fel, numai aceștia din urmă pot avea capacitatea de a distinge! diferitele cadre ale activităților jucăușe și nu ale activităților ludice, de exemplu, jocul unui joc de război din războiul însuși. Cu toate acestea, s-ar putea răspunde la această critică cu aceeași poziție comportamentală exemplificată de testul Turing, care subliniază problema a ceea ce se întâmplă în interiorul mașinii pentru a se concentra în schimb pe comportamentul observabil. Vezi Bateson, „A Theory of Play and Fantasy”; Goffman, Analiza cadrelor.

55. 	Galloway, Gaming.

56. 	Dourish, unde este acțiunea.

57. 	Creștin, Cel mai uman om, 175.

58. 	Vezi, de exemplu, Block, „The Computer Model of the Mind”.

59. 	Korn, Iluziile realității.

60. 	A se vedea capitolul 5 despre concursul Loebner Prize, organizat anual de la începutul anilor 1990, în care programatorii de computere își introduc chatbot-urile în speranța de a trece o versiune a testului Turing.

61. 	Geoghegan, „Agenții istoriei”. În mod similar, Lanier observă că atât șahul, cât și computerele au apărut ca instrumente de război: „impulsul de a concura este palpabil în ambele
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informatica si sahul, iar atunci cand sunt reunite, adrenalina curge.” Lanier, nu ești un gadget, 33 de ani.

62. 	Copeland, „Colosul”.

63. 	Whitby, „Testul Turing”.

64. 	Goode, „Viața, dar nu așa cum o știm”.

65. 	Huizinga, Homo Ludens, 13.

66. 	Acest lucru rezonează în experiențele contemporane cu sisteme precum Siri și Alexa, în care utilizatorii umani se angajează în glume și interacțiuni jucăușe, punând la îndoială limitele și potențialul imitării umanității de către AI. Vezi Andrea L. Guzman, „Making AI Safe for Humans”.

67. 	Oamenii de știință au sugerat că acest lucru era legat de o preocupare subiacentă a lui Turing cu definițiile de gen. Vezi, printre altele, Shieber, The Turing Test, 103; Bratton, „Outing Artificial Intelligence”. Reprezentările de gen și chatbot-uri care joacă o versiune a testului Turing sunt discutate în continuare în capitolul 5.

68. 	Hofer, Jocurile pe care le-am jucat.

69. 	Dumont, Oracolul Doamnei.

70. 	Ellis, Lucifer Ascending, 180.

71. 	A se vedea, despre aceasta, Natale, Supernatural Entertainments, în special capitolul 2. Anthony Enns a susținut recent că testul Turing „semăna cu o ședință spirituală,

în care șederii au încercat în mod similar să stabilească dacă un spirit invizibil era uman punând o serie de întrebări. La fel ca spiritele care se presupune că s-au manifestat în timpul acestor ședințe, o inteligență artificială a fost, de asemenea, descrisă ca o entitate neîncarnată care există pe un plan imaterial care poate fi accesat doar prin tehnologiile media. Și la fel cum participanții la ședință au avut adesea dificultăți în a determina dacă mesajele primite de la spirite ar putea fi considerate dovezi ale unei prezențe autentice, la fel și oamenii de știință și inginerii au avut adesea dificultăți în a determina dacă răspunsurile primite de la mașini ar putea fi considerate dovezi ale inteligenței autentice. Aceste două fenomene erau similare din punct de vedere structural, cu alte cuvinte, pentru că au postulat că nu există nicio diferență esențială între identitate și informație sau între inteligența reală și inteligența simulată, ceea ce făcea efectiv ca oamenii să nu se distingă de mașini. Enns, „Teoria informației despre suflet”.

72. 	Lamont, Convingerile extraordinare.

73. 	După cum ar fi observat pionierul american al spectacolului PT Barnum, „publicul pare dispus să se distreze chiar și atunci când este conștient că este înșelat”. Cook, The Arts of Deception, 16.

74. 	Vezi, de exemplu, Von Hippel și Trivers, „The Evolution and Psychology of Self Deception”.

75. 	Marenko și Van Allen, „Design animist”.

76. 	McLuhan, UnderstandingMedia.

77. 	Guzman și Lewis, „Inteligenta artificială și comunicare”.

78. 	Vezi Leja, Looking Askance; Doane, Apariția timpului cinematografic; Sterne, MP3.

CAPITOLUL 2

1. 	Kline, „Cybernetics, Automata Studies, and the Dartmouth Conférence on Artificial Intelligence”; Hayles, Cum am devenit postumani.

2. 	A se vedea, de exemplu, Crevier, AL

3. 	Solomon, Trucuri care dispar; Gunning, „O estetică a uimire”. Conjuratori practicanți de teatru, cum ar fi Georges Méliès, au fost printre primii exhibiționişti și realizatori de film, precum și mulți spectatori timpurii.
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cinema experimentat ca parte a spectacolelor de magie. Vezi, printre altele, Barnouw, The Magician and the Cinema; North, „Magie și iluzie în cinematografia timpurie”; Leeder, Supranaturalul modern și începuturile cinematografiei.

4. 	În timpul, Descântecele moderne.

5. 	Chun, viziuni programate. Din acest motiv, există un element de înfricoșare și de mirare în modul în care algoritmii informează viața de zi cu zi – astfel încât, uneori, când cineva își vede gusturile sau căutările anticipate de platformele digitale, nu se poate să nu se întrebe dacă Amazon sau Google își citesc gândurile. . Vedeți, despre asta, Natale și Pasulka, Believingin Bits.

6. 	Martin, „The Myth of the Awesome Thinking Machine”, 122. Excitarea publicului față de AI a fost alimentată și de filmele și literatura științifico-fantastică. Despre relația dintre literatura și filmul imaginar și ficțional AI,

vezi Sobchack, „Science Fiction Film and the Technological Imagination”; Goode, „Viața, dar nu așa cum o știm noi”; Bory și Bory, „I nuovi immaginari dell'intelligenza artificiale”.

7. 	Martin, „The Myth of the Awesome Thinking Machine”, 129.

8. 	După cum subliniază istoricul AI Hamid Ekbia, „ceea ce face AI distinctă de alte discipline este că practicienii săi „traduc” termeni și concepte dintr-un domeniu în altul într-un mod sistematic.” Ekbia, Artificial Dreams, 5. Vezi și Haken, Karlqvist și Svedin, The Machine as Metaphor and Tool.

9. 	Minsky, Semantic Information Processing, 193.

10. 	Minsky, Procesarea semantică a informațiilor.

11. 	Despre rolul analogiilor și metaforelor în discursul științific, vezi Bartha, „Analogy and Analogica! Raţionament." Comparația dintre artificial și biologic! viața ar putea merge atât de departe încât să includă elemente ale umanității care au depășit limitele simplei gândiri raționale, să includă sentimente și emoții. În 1971, de exemplu, un articol din New Scientist era intitulat „Robotul japonez are sentimente reale”. Citind articolul cu mai multă atenție, s-ar putea înțelege că problema experimentelor nu a fost atât emoțiile umane, cât capacitatea unui robot de a simula percepția tactilă prin obținerea de informații despre un obiect prin contact. Jucându-se cu ambiguitatea semantică a cuvintelor „sentiment” și „sentimente” și făcând aluzie la emoțiile umane dincolo de stimulii tactili de bază, autorul a adăugat o cantitate considerabilă de senzaționalism raportului său. Anonim, „Robotul japonez are sentimente reale”, 90. Vezi pe acest Natale și Ballatore, „Imagining the Thinking Machine”.

12. 	Hubert L. Dreyfus, What Computers Cant Do, 50-51.

13. 	Filosoful John Haugeland a etichetat această abordare „Good Old-Fashioned Artificial Intelligence” (GOFAI), pentru a o deosebi de cele mai recente sub-simbolice, conecționiste și statistice! tehnici. Haugeland, Inteligența artificială.

14. 	Conceptul de „cutie neagră”, care descrie tehnologii care oferă puține sau deloc informații despre funcționarea lor internă, se poate aplica, prin urmare, computerelor, precum și creierului uman.

15. 	Citat în Smith, The AI Delusion, 23. Cuvintele sale au făcut ecou remarcile îngrijorate ale lui Weizenbaum cu privire la responsabilitatea informaticienilor de a transmite reprezentări precise ale funcționării și puterii sistemelor de calcul. Weizenbaum, Puterea computerului și rațiunea umană.

16. 	Pentru o discuție aprofundată, vezi Natale și Ballatore, „Imagining the Thinking Machine”.

17. 	Minsky, „Artificial Intelligence”, 246. Despre tehno-șovinismul lui Minsky, vezi Broussard, Artificial Unintelligence.
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18. 	Într-un articol al vremii citat frecvent, Armer și-a stabilit obiectivul de a analiza atitudinile față de AI cu speranța de a „îmbunătăți climatul care înconjoară cercetarea în domeniul mașinilor sau al inteligenței artificiale”. Armer, „Atitudini față de mașinile inteligente”, 389.

19. 	McCorduck, Machines Who Think, 148.

20. 	Messeri și Vertesi, „The Greatest Missions Never Flown”. Cazul legii lui Moore este un bun exemplu în domeniul informaticii al modului în care proiecțiile despre realizările viitoare pot motiva comunități specifice de cercetare să-și orienteze așteptările și să lucreze spre atingerea anumitor standarde, dar și să își mențină eforturile în limitele definite. Vezi Brock, Înțelegerea legii lui Moore.

21. 	Exemple notabile includ Kurzweil, The Singularity Is Near; Bostrom, Superintelligence. În ceea ce privește ficțiunea, exemplele sunt numeroase și includ filme precum diferitele versiuni din saga Terminator, Her (2013) și Ex Machina (2014).

22. 	Broussard, Artificial Unintelligence, 71. Vezi și Stork, HAL's Legacy.

23. 	McLuhan, Understanding Media.

24. 	Doane, Apariția timpului cinematografic; Münsterberg, Filmul.

25. 	Sterne, Trecutul audibil; Sterne, MP3.

26. 	În prezentarea sa de ansamblu asupra istoriei proiectării interacțiunii om-calculator până în anii 1980, Grudin susține că „locația „interfeței utilizator” a fost împinsă din ce în ce mai departe de computerul însuși, mai adânc în utilizator și în lucrare. mediu inconjurator." Accentul sa mutat de la manipularea directă a hardware-ului

la primele computere mainframe la diferite niveluri de abstractizare prin limbaje și software de programare și la terminale video și alte dispozitive care s-au adaptat la abilitățile de percepție ale utilizatorilor, încercări mai ample de a potrivi funcțiile cognitive și, în final, abordări de mutare a interfeței în medii și grupuri sociale mai largi. a utilizatorilor. Grudin, „The Computer Reaches Out”, 246. Pentru o istorie a interacțiunii om-calculator care recunoaște, de asemenea, că acest domeniu are o istorie înaintea computerului, vezi Mindell, Between Human and Machine.

27. 	Acest lucru se aplică în special deceniilor inițiale de dezvoltare în informatică, când interacțiunea om-calculator nu se unise încă într-un subdomeniu autonom. Cu toate acestea, problemele implicate de interacțiunea om-calculator au rămas relevante pentru AI de-a lungul întregii sale istorii și chiar dacă ar putea fi utilă separarea celor două domenii în anumite contexte și abordarea unor probleme specifice, este imposibil de înțeles relația strânsă dintre AI și comunicare fără a lua în considerare AI și interacțiunea om-calculator pe linii paralele. Grudin, „Turing Maturing”; Dourish, unde este acțiunea.

28. 	Marvin Minsky, de exemplu, și-a cerut scuze la sfârșitul unui articol din 1961 pentru faptul că „am discutat aici doar lucrări referitoare la programe de rezolvare a problemelor mai mult sau mai puțin autonome. Dar, așa cum este scris acest lucru, începem în sfârșit să vedem o activitate viguroasă în direcția construirii de sisteme de calcul utilizabile de partajare a timpului sau multiprogramare. Cu aceste sisteme, va deveni în sfârșit economic! pentru a potrivi ființele umane în timp real cu mașini cu adevărat mari. Aceasta înseamnă că putem lucra la programarea a ceea ce va fi, de fapt, „ajutoare pentru gândire”. În anii care vor urma, ne așteptăm ca aceste sisteme om-mașină să împărtășească, și poate să fie dominante pentru o vreme, în avansul nostru către dezvoltarea „inteligenței artificiale”.” Minsky, „Pași către inteligența artificială”, 28.
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29. 	A se vedea, despre aceasta, Guzman, Human-Machine Communication”, Guzman și Lewis, „Artificial Intelligence and Communication”.

30. 	Licklider, „Simbioza om-calculator”. Cu privire la impactul articolului lui Licklider asupra inteligenței artificiale și a informaticii din acea vreme, a se vedea, printre altele, Edwards, Closed Worlds, 266. Deși articolul lui Licklider a adus conceptul de simbioză în centrul dezbaterilor în informatică, abordări similare au avut au fost dezvoltate înainte în cibernetică și în lucrările anterioare care priveau mașinile de calcul nu numai ca procesoare, ci și ca distribuitori de informații. Vezi Bush, „As We May Think”; Hayle, Cum am devenit postumani. Pentru un exemplu de abordări care au analizat relația dintre computere și comunicare în afara domeniului de aplicare al AI, cum ar fi ergonomia și munca de colaborare susținută de computer, a se vedea Meadow, Comunicarea om-mașină.

31. 	Licklider, „Simbioza om-calculator”, 4.

32. 	Hayles, Cum am devenit postumani.

33. 	Shannon, „The Mathematica! Teoria comunicării”; Wiener, Cibernetica. În mod interesant, înțelegerea comunicării ca neîncarnată, care a apărut deja în secolul al XIX-lea odată cu dezvoltarea mijloacelor electronice, a stimulat și viziuni spirituale bazate pe ideea că comunicarea ar putea fi smulsă din natura sa fizică; aceasta este legată de teoria informației, așa cum arată Enns, „Teoria informațiilor despre suflet”. Vezi și Carey, Communication as Culture; Peters, Vorbind în aer; Sconce, Haunted Media.

34. 	Hayles, How We Became Posthuman; McKelvey, Internet Daemons, 27. După cum sa menționat, principiul cheie al IA timpurie a fost că gândirea rațională era o formă de calcul, care putea fi replicată prin logica simbolică programată în computere.

35. 	Suchman, Reconfigurari om-mașină.

36. 	Vezi, de exemplu, Carbonell, Elkind și Nickerson, „On the Psychological Importance of Time in a Time Sharing System”; Nickerson, Elkind și Carbonell, „Factori umani și proiectarea sistemelor de computere pentru partajarea timpului”.

37. 	La începutul erei computerelor, sistemele centrale de calcul mari instalate la universități și alte instituții erau capabile să gestioneze un singur proces

la un moment dat. Programele au fost executate în lot, fiecare dintre ele ocupând toate resursele computerului la un moment dat. Aceasta a însemnat că cercetătorii au trebuit să acceseze pe rând mașinile. Treptat, a apărut o nouă abordare numită time-sharing. Spre deosebire de sistemele anterioare, partajarea timpului permitea diferiților utilizatori să acceseze un computer în același timp. Dându-le utilizatorilor impresia că computerul răspunde în timp real, a deschis calea pentru dezvoltarea de noi modalități de interacțiune utilizator-calculator și a permis un acces mai larg la sistemele informatice.

38. 	Simon, „Reflecții asupra partajării timpului din punctul de vedere al unui utilizator”, 44.

39. 	Greenberger, „Cele două părți ale partajării timpului”.

40. 	Greenberger, „The Two Sides of Time Sharing”, 4. Un cercetător la MIT care a lucrat la Proiectul MAC, Greenberger a remarcat că subiectul timpului partajat poate fi împărțit în probleme/probleme separate: sistemul și utilizatorul. Această distincție „între sistem și utilizator este reflectată în acronimul cu două tăișuri al proiectului MAC al MIT: Multi-Access Computer se referă la instrumentul fizic sau la sistem, în timp ce Machine-Aided Cognition exprimă speranțele utilizatorului”(2).

41. 	Broussard, Artificial {Inintelligence; Hicks, ProgramedInequality.
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42. 	Weizenbaum, „How to Маке a Computer Appear Intelligent,” 24. Lucrările proprii ale lui Weizenbaum despre procesarea limbajului natural, chatbots și deception este discutată în capitolul 3.

43. 	Minsky, „Unele metode”, 6.

44. 	Minsky, „Unele metode”, 6.

45. 	Minsky, „Probleme de formulare pentru inteligența artificială”, 39.
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40. 	Studiile privind receptarea ficțiunii interactive și a jocurilor de rol au arătat că acestea solicită o implicare mult mai profundă decât ficțiunea literară. Un utilizator, de exemplu, ar putea simți emoții care sunt de obicei absente din experiența citirii unui text fictiv, cum ar fi să se simtă responsabil personal pentru acțiunile protagonistului. Tavinor, „Jocuri video și ficțiune interactivă”. Despre rolul empatiei în crearea participării și angajării cu personaje fictive, vezi Lankoski, „Angajarea caracterului jucătorului în jocurile pe computer”.

41. 	Montfort, „Zork”.

42. 	Goffman, Analiza Erame; Bateson, „O teorie a jocului și a fanteziei”.

43. 	Turkle, Al doilea Sine.

44. 	Nishimura, „Fan Fiction semi-autonom”.

45. 	Jerz, „Undeva în apropiere este peștera colosală”.

46. 	Ceva similar pare să se aplice și în cazul recepționării sistemelor de generare a limbajului care nu sunt menite să intre în conversație cu utilizatorii, ci să producă texte literare sau jurnalistice, așa cum a arătat Henrickson, „Tool vs. Agent”.

47. 	Vezi capitolul 2, precum și, printre altele, Grudin, „The Computers Reach Out”; Dourish, unde este acțiunea; Scolari, Las leys de la interfaz.

[150] Note

48. 	Dourish, unde este acțiunea.

49. 	DeLoach, „Interfețe sociale”.

50. 	Brenda Laurel definește „agent de interfață” ca „un personaj, interpretat de computer, care acționează în numele utilizatorului într-un mediu virtual (bazat pe computer)”. Laurel, „Agenți de interfață: metafore cu caracter”, 208.

51. 	McCracken, „The Bob Chronicles”.

52. 	A se vedea, printre altele, Smith, „Microsoft Bob to Have Little Steam, Analysts Say”; Magid, „Microsoft Bob: Nicio a doua șansă de a face o primă impresie”; Decembrie, „În căutarea lui Bob”.

53. 	Gooday, „Rescrierea cărții „Blots” bipartito, „Picturephone and the Information Age”; Balbi și Magaudda, Fallimenti digitali.

54. 	Cu privire la încercările ulterioare ale Microsoft de a dezvolta interfețe sociale, a se vedea Sweeney, „Not Just a Pretty (Inter)Face”.

55. 	Smith, „Microsoft Bob to Have Little Steam”.

56. 	„Microsoft Bob Cornes Home”. Pentru o scurtă modalitate de a vă face o idee despre cum a funcționat Microsoft Bob, consultați „Un tur ghidat al Microsoft Bob”. Vedeți și „Microsoft Bob”.

57. 	După cum a observat un jurnalist, Bob a fost totuși „un nume curios pentru un program care nu conține pe nimeni numit Bob”: de fapt, nu a existat niciun ghid personal disponibil care să audă acest nume. Warner, „Microsoft Bob se ține de mână cu începătorii de PC.”

58. 	„Un tur ghidat al Microsoft Bob”. Pentru o discuție despre oportunitatea de a include o personalitate în agenții de interfață, vezi Marenko și Van Allen, „Animistic Design”.

59. 	„Microsoft Bob Cornes Home”.

60. 	William Casey, „Cele două fețe ale lui Microsoft Bob”.

61. 	McCracken, „The Bob Chronicles”.

62. 	Leonard, Bots, 77. Un alt punct comun de critică a fost că Bob nu a acceptat un manual. Acest lucru a fost menit să sublinieze faptul că interfețele sociale permit utilizatorilor să învețe prin experiență; cu toate acestea, într-o perioadă în care manuaisurile lungi erau norma

pentru software comercial, acest lucru amânat pe severa! comentatori. Vezi, de exemplu, Magid, „Microsoft Bob”.

63. 	Manes, „Bob”, C8.

64. 	Gillmor, „Bubba Meets Microsoft”, 1D. Vezi și Casey, „The Two Faces of Microsoft Bob”.

65. 	„Microsoft Bob Cornes Home”.

66. 	Reeves și Nass, The Media Equation; Nass și Moon, „Mașini și lipsă de minte”.

67. 	Trower, „Bob și dincolo”.

68. 	„Acasă Microsoft Bob Cornes”.

69. 	Citat în Trower, „Bob and Beyond”.

70. 	Reeves și Nass, The Media Equation.

71. 	Nass și Moon, „Mașini și lipsă de minte”.

72. 	Negru, „Util și util”. Vezi si capitolul 2.

73. 	McCracken, „The Bob Chronicles”.

74. 	Andersen și Pold, Metainterfața.

75. 	După cum ar putea confirma orice magician de scenă, acest lucru face de obicei o iluzie slabă. Coppa, Hass și Peck, PerformingMagic pe scena de vest.

76. 	„Alexa, eu sunt tatăl tău”.

77. 	Liddy, „Procesarea limbajului natural”. Pentru o imagine de ansamblu sintetică și perspicace a contribuției procesării limbajului natural la cercetarea AI, a se vedea Wilks, Inteligența artificială.

78. 	Suchman, Reconfigurari om-mașină.
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CAPITOLUL 5

1. 	Epstein, „Căutarea computerului gânditor”.

2. 	Vezi, printre altele, Boden, Mind as Machine, 1354; Levesque, bunul simț, testul Turing și căutarea AI Reai.

3. 	Shieber, „Lecții dintr-un test Turing restricționat”.

4. 	Floridi, Taddeo și Turilli, „Turing’s Imitation Game”; Weizenbaum, Insulele din Cyherstream, 92-93.

5. 	Barr, „Naturai Language Understanding”, 5-10; vezi, de asemenea, Wilks, Artificial Intelligence, 7-8.

6. 	Epstein, „Mașinile pot gândi?”

7. 	Shieber, „Lecții dintr-un test Turing restricționat”; Epstein, „Mașinile pot gândi?”

8. 	După cum sa arătat în capitolele anterioare, la urma urmei, imaginarul a jucat un rol cheie în direcționarea cursului IA de-a lungul istoriei sale lungi, cu narațiuni entuziaste care caracterizează ascensiunea sa în anii 1950 și 1960 și un val de dezamăgire care a marcat „Iarna AI”. ” în următoarele două decenii. A se vedea în special capitolele 2 și 3.

9. 	Streeter, The Net Effect; Flichy, The Internet Imaginaire; Turner, De la contracultură la cihercultură.

10. 	Bory, „Deep New”; Smith, The AI Delusion, 10.

11. 	Boden, Mind as Machine, 1354. Marvin Minsky, unul dintre principalii critici ai Premiului Loebner, în acest sens, când a numit Premiul o „cascoală publicitară”. El a oferit, de asemenea, 100 de dolari oricui ar pune capăt premiului. Loebner, fără a rata niciodată o ocazie de publicitate, a răspuns acuzațiilor lui Minsky anunțând că Minsky este acum un co-sponsor, deoarece concursul Premiului Loebner se va încheia odată ce un program de calculator trecuse testul Turing. Walsh, Android Dreams, 41.

12. 	Luger și Chakrabarti, „De la Alan Turing la AL modern”

13. 	Markoff, „Theaters of High Tech”, 15.

14. 	Epstein, „Mașinile pot gândi”, 84; vezi, de asemenea, Shieber, „Lecții dintr-un test Turing restricționat”; Loebner, „Testul Turing”. Merită menționat faptul că, într-un omagiu adecvat adus descendenței chatbot-urilor înșelătoare, creatorul ELIZA, Joseph Weizenbaum, a fost membru al comitetului premiului pentru primul concurs.

15. 	Reglementările din următoarele cazuri ale concursului pentru Premiul Loebner au variat semnificativ în ceea ce privește multe aspecte cheie, inclusiv durata conversațiilor, care a variat de la cinci la douăzeci de minute. Datorită neclarității propunerii inițiale a lui Turing, nu a existat aproape un consens cu privire la cum ar trebui să arate un „test Turing”, iar diferitele comitete de organizare ale premiului au luat decizii diferite în momente diferite. Pentru o discuție despre regulile de joc ale concursului Premiul Loebner, vezi Warwick și Shah, Turing's Imitation Game.

16. 	Ca și în cazul altor provocări uman-versus-mașină care au făcut titluri în acea perioadă, confruntarea a fost povestită prin modelele narative populare tipice jurnalismului sportiv: unele reportaje, de exemplu, aveau un ton naționalizat, ca în artides din presa britanică salutând câștigarea premiului Loebner de către o echipă din Marea Britanie în 1997. „British Team Has Chattiest Computer Program”; „Conversații cu Converse”.

17. 	Epstein, „Mașinile pot gândi?”

18. 	Geoghegan, „Agenții istoriei”, 407. Despre istoria lungă a evenimentelor spectaculoase care prezintă minuni sdentifice și tehnologice, vezi, printre altele, Morus, Frankenstein's Children; Nadis, Spectacole de minuni; Highmore, „Magie mecanică”.

19. 	Sussman, „Performing the Intelligent Machine”, 83.

[152] Note

20. 	Epstein, „Can Machines Think?”, 85. În 1999, competiția Loebner Prize a fost, de asemenea, vizionată pentru prima dată pe web.

21. 	Vezi, de exemplu, Charlton, „Computer: Machines Meet Mastermind”; Markoff, „Deci cine vorbește?” De-a lungul anilor, jurnaliştii au făcut eforturi semnificative pentru a găsi titluri originale pentru concurs. Preferatul meu personal: „Gândesc, deci Tm RAM”.

22. 	Epstein, „Mașinile pot gândi?”, 82.

23. 	Shieber, „Lecții dintr-un test Turing restricționat”, 4.

24. 	Epstein, „Mașinile pot gândi?”, 95.

25. 	Vezi, despre aceasta, Natale, „Unveiling the Biographies of Media”.

26. 	Wilner, Christopoulos, Alves și Guimarães, „Moartea lui Steve Jobs”.

27. 	Lindquist, „Căutarea mașinilor care gândesc”; "Aproape uman."

28. 	Vezi capitolul 2.

29. 	Exemple de rapoarte mai critice includ Allen, „Why Artificial Intelligence May Be a Really Dumb Idea”; „Pot mașinile să gândească? Judecătorii nu cred.” Despre dualismul dintre entuziasm și critica la adresa IA și rolul controverselor în mitul AI, vezi Natale și Ballatore, „Imagining the Thinking Machine”, 9-11.

30. 	Markoff, „Mașinile pot gândi?”

31. 	Creștin, Cel mai uman om.

32. 	Haken, Karlqvist și Svedin, Mașina ca metaforă și unealtă, 1; Gitelman, Scripturi, Groove și WritingMachines; Schank și Abelson, Scripturi, planuri, obiective și înțelegere.

33. 	Crace, „The Making of the Maybot”; Flinders, „Politica (an ti-) a alegerilor generale”.

34. 	A se vedea, despre aceasta, Stokoe et al., „Can Humans Simulate Talking Like Other Humans?”

35. 	Creștin, Cel mai uman om, 261.

36. 	Collins, Artificitional Intelligence, 51. Acest lucru s-a întâmplat chiar și atunci când judecătorilor li s-a interzis în mod explicit să folosească „înșelătorie sau înșelăciune” pentru a detecta păcăleala: în contextul concursului pentru Premiul Loebner, de fapt, este practic imposibil să distingem șmecheria de cea reală. interacțiune, deoarece toți actorii sunt în mod constant conștienți de posibilitatea de a înșela și de a fi înșelați. Shieber, „Lecții dintr-un test Turing restricționat”, 6.

37. 	Epstein, „Mașinile pot gândi?”, 89.

38. 	Shieber, „Lecții dintr-un test Turing restricționat”, 7.

39. 	Turkle, Life on the Screen, 86. După cum a subliniat și Hector Levesque despre conversațiile din Premiul Loebner, „ceea ce este izbitor la transcrierile acestor conversații este fluiditatea răspunsurilor de la subiecții testului: joc de cuvinte elaborat, jocuri de cuvinte, glume. , citate, deoparte, izbucniri emoționale, puncte de ordine. Totul, s-ar părea, cu excepția răspunsurilor clare și directe la întrebări.” Levesque, bunul simț, testul Turing și căutarea IA reală, 49.

40. 	De exemplu, pentru a calcula întârzierea necesară între fiecare personaj pentru a-și face chatbot-ul credibil, Michael L. Mauldin a făcut acest calcul înainte de ediția din 1992 a Premiului Loebner: „am obținut jurnalele în timp real ale competiției din 1991 . . . și a luat probe din dosarul de dactilografiere al judecătorului #10 (ales pentru că a fost cel mai lent dactilograf dintre cei 10 judecători). Întârzierea medie între două caractere este de 330 de milisecunde, cu o abatere standard de 490 de milisecunde.” Mauldin, „ChatterBots, TinyMuds și testul Turing”, 20.

41. 	Yorick Wilks, care a câștigat premiul Loebner în 1997 cu programul CONVERSE, și-a amintit, de exemplu, că „tipurile de trucuri pe care le folosim pentru a păcăli judecătorii includeau lucruri precum greșelile de ortografie pentru a părea uman și
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asigurându-vă că răspunsurile computerului apar lent pe ecran, ca și cum ar fi fost tastate de o persoană, și nu instantaneu, ca și cum ar fi citite din datele stocate.” Wilks, Inteligența artificială, 7.

42. 	Epstein, „Mașinile pot gândi?”, 83.

43. 	Pentru o listă a trucurilor obișnuite folosite de dezvoltatorii de chatbot, vezi Mauldin, „ChatterBots, TinyMuds, and the Turing Test”, 19. Vezi și Wallace, „The Anatomy of ALICE”

44. 	Citat în Wilks, Artificial Intelligence, 7. Yorick Wilks a făcut parte din echipa CONVERSE.

45. 	Jason L. Hutchens, „Cum să treci testul Turing prin trișare”.

46. 	Natale, „Cinemul expunerii”.

47. 	Münsterberg, Problemele americane din punctul de vedere al unui psiholog, 121.

48. 	Desigur, aceasta nu este norma în toate interacțiunile de pe web, așa cum arată utilizarea din ce în ce mai mare a CAPTCHA și problema boților sociali. Vedeți pe Fortunati, Manganelli, Cavallo și Honsell, „Trebuie să arăți că ești un robot”.

49. 	Humphrys, „How My Program Passed the Turing Test”, 238. Despre chatbot-ul lui Humphrys și versiunea sa online ulterioară, MGonz, vezi și Christian, The Most Human Human, 26-27.

50. 	Humphrys, „Cum programul meu a trecut testul Turing”, 238.

51. 	Turkle, Viața pe ecran, 228.

52. 	Leslie, „De ce Donald Trump este primul președinte Chatbot”.

53. 	Epstein, „Din Rusia, cu dragoste”.

54. 	Muhle, „Agenți conversaționali încorporați ca actori sociali?”

55. 	Boden, Mindas Machine, 1354. Nivelul nu a crescut semnificativ de-a lungul anilor. După cum a remarcat Yorick Wilks, „sistemele care câștigă de obicei nu intră din nou, deoarece nu mai au nimic de demonstrat. Așa că intră și câștigă alții noi, dar nu par mai fluenți sau mai convingătoare decât cei cu un deceniu înainte. Acesta este un corector al viziunii populare conform căreia AI avansează mereu la timp și la un nivel excelent

rată. După cum vom vedea, unele părți sunt, dar altele sunt destul de statice.” Wilks, Inteligența artificială, 9.

56. 	Shieber, „Lecții dintr-un test Turing restricționat”, 6; creștin, cel mai uman om. Pentru câteva puncte excelente de intrare în istoria culturală a deception-ului, vezi Cook, The Arts of Deception; Pettit, Știința decepției; Lamont, Credințele extraordinare.

57. 	Epstein, „Mașinile pot gândi?”, 86.

58. 	Suchman, Human-Machine Reconfigurations, 41. Problema locuinței a fost descrisă inițial în Watt, „Habitability”.

59. 	Nass and Brave, Wired for Speech; Guzman, „Fă AI sigură pentru oameni”.

60. 	Malin, FeelingMediated; Peters, Vorbind în aer. Pentru o examinare a unora dintre contextele în care această recunoaștere a eșuat, a se vedea Lisa Gitelman, Scripts, Grooves, and Writing Machines. Pentru o discuție despre conceptul de mediatizare și impactul acestuia asupra societăților contemporane, vezi Hepp, Deep Mediatization.

61. 	Gombrich, Artă și iluzie, 261.

62. 	Bourdieu, Schiţa unei teorii a practicii.

63. 	Bickmore și Picard, „Subtle Expressivity by Relational Agents”, 1.

64. 	Acest lucru se aplică și spațiilor online, după cum a subliniat Gunkel: „aparenta „inteligență” a robotului este atât de mult un produs al programării și operațiunilor interne ale botului, cât este un produs al contextului social strict controlat în care funcționează dispozitivul. .” Gunkel, O introducere în comunicare și inteligență artificială, 142.

[154] Note

65. 	Humphrys, „Cum programul meu a trecut testul Turing”.

66. 	bupkowski și Rybacka, „Strategii non-cooperative ale jucătorilor în concursul Loebner”.

67. 	Hutchens, „Cum să treci testul Turing prin trișare”, 11.

68. 	Chemers, „'Like to a Lively Thing'”

69. 	Vezi, printre multe altele, Weizenbaum, Computer Power and Human Reason; Laurel, Calculatoarele ca teatru; Leonard, Bots, 80 de ani; Pollini, „O perspectivă teoretică asupra agenției sociale”.

70. 	De exemplu, în Eytan Adar, Desney S. Tan și Jaime Teevan, „Benevolent Deception in Human Computer Interaction”; precum și Laurel, Computers as Theatre.

71. 	Bates, „Rolul emoției în agenți credibili”; Murray, Hamlet pe Holopunte.

72. 	Eco, Lector în Fabula.

73. 	Acest lucru este similar, în principiu, cu ceea ce se întâmplă într-o conversație între doi oameni, cu diferența crucială că, în majoritatea acestor conversații, niciuna dintre ele nu urmează un scenariu prestabilit, așa cum ar face un chatbot din concursul Loebner Prize.

74. 	După cum a susținut Peggy Weil, „roboții sunt improvizatori în sensul că codul lor este pregătit, dar livrarea sa, deși determinată de reguli, este instabilă. Este o formă de improvizație asociată cu artistul solo care conduce un dialog cu un public live. Acesta poate fi un public format din unul sau mai mulți, dar, mai important, este un public necunoscut. Oricine se poate conecta la chat și oricine poate și ar putea spune orice. Botul, precum păpușarul, ventrilocul, clovnul, magicianul, omul de încredere și cei cărora le transmitem confidențe, terapeutul, trebuie să fie și ei pregătiți pentru orice.” Weil, „Serios scris SIRI”. Weil este creatorul MrMind, un chatbot dezvoltat în 1998 pentru a întruchipa un test Turing invers, invitând utilizatorii să-l convingă pe MrMind că sunt oameni.

75. 	Whalen, „Participarea lui Thom la Concursul Loebner 1995”. Whalen a reflectat, de asemenea, asupra avantajelor programelor de a privilegia prostiile mai degrabă decât o poveste coerentă: „în al treilea rând, am emis ipoteza că judecătorii ar fi mai toleranți cu programul spunând „Nu știu” decât cu un non-sequiter. Astfel, mai degrabă decât să-l pun pe program să facă o grămadă de afirmații irelevante când nu putea înțelege întrebările, pur și simplu l-am rugat să se rotească prin patru afirmații care erau sinonime cu „Nu știu”. Programul lui Weintraub [care a câștigat concursul] a fost însă un maestru al non-sequiterului. Răspundea continuu cu o declarație extrem de irelevantă, dar introducea o clauză sau o propoziție calificativă care folosea un substantiv sau o expresie verbală din întrebarea judecătorului pentru a încerca să stabilească un strat subțire de relevanță. Sunt uimit de cât de veseli au tolerat judecătorii un astfel de comportament. Pot doar concluziona că oamenii nu cer ca partenerii lor de conversație să fie consecvenți sau chiar rezonabili.”

76. 	Neff și Nagy, „Talking to Bots”, 4916.

77. 	Vezi pe această temă Lessard și Arsenault, „The Character as Subjective Interface”; Nishimura, „Fan Fiction semi-autonomă: Bot cu caracter japonez și afect non-uman”.

78. 	Cerf, „PARRY Encounters the DOCTOR”.

79. 	Neff și Nagy, „Talking to Bots”, 4920.

80. 	Hall, Représentation.

81. 	Marino, I, Chatbot, 87.

82. 	Shieber, „Lecții dintr-un test Turing restricționat”, p. 17.
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83. 	Mauldin, „ChatterBots, TinyMuds și testul Turing”, 17.

84. 	Zdenek, „Rising Up from MUD”.

85. 	Turing, „Computing Machinery and Intelligence”.

86. 	Vezi, printre alții, Brahnam, Karanikas și Weaver, „(Un)dressing the Interface”; Gunkel, Gaming the System; Bratton, Outing Artificial Intelligence.”

87. 	Copeland, Turing.

88. 	Bratton, „Outing Artificial Intelligence”; Marino, eu, Chatbot.

89. 	Zdenek, „'Just Roii Your Mouse over Me.'”

90. 	Sweeney, „Nu doar o (inter)față drăguță.” Decizia Microsoft de a introduce interfața pe care au numit-o doamna Dewey ar trebui văzută și în ceea ce privește strategiile de marketing și publicitate. După cum subliniază Sweeney, „Dna. Dewey nu a fost marcat și promovat în mod deschis ca un produs Microsoft, ci a fost conceput pentru a se răspândi viral prin rețelele sociale ale utilizatorilor” (64). O versiune a interfeței includea o opțiune care invita utilizatorii să „Partajeze această căutare cu un prieten” pentru a-i încuraja să o distribuie pe doamna Dewey pe rețelele sociale.

91. 	Nobil, Algoritmi de asuprire.

92. 	Woods, „Asking More of Siri and Alexa.”

93. 	Goode, „Viața, dar nu așa cum o știm noi”; Bory și Bory, „I nuovi immaginari dell'intelligenza Artificiale”.

94. 	Jones, „Cum am învățat să nu mă mai îngrijorez și să iubesc roboții”; Ferrara, Varol, Davis, Menczer și Flammini, „The Rise of Social Bots”; Castelfranchi și Tan, încredere și deception în societățile virtuale.

95. 	Turkle, ReclaimingConversation, 338; vezi și Hepp, „Artificial Companions, Social Bots and Work Bots”.

96. 	Gehl și Bakardjieva, Socialbots și prietenii lor.

97. 	Guzman, „Making AI Safe for Humans”.

98. 	Picard, Affective Computing, 12-13; Warwick și Shah, jocul de imitație al lui Turing.

CARTA 6

1. 	MacArthur, „The iPhone Erfahrung”, 117. A se vedea, de asemenea, Gallagher, Videogames, Identity and Digital Subjectivity, 115.

2. 	Hoy, „Alexa, Siri, Cortana și altele”; „Numărul de asistenți vocali digitali utilizați la nivel mondial din 2019 până în 2023”; Oison și Kemery, „De la răspunsuri la acțiune”; Gunkel, O introducere în comunicare și inteligență artificială, 142-54. Asistenții vocali sunt uneori denumiți și sisteme de dialog vocal (SDS). Folosesc aici termenul de asistent vocal pentru a le diferenția de sistemele care folosesc tehnologii similare, dar cu funcții și încadrare diferite.

3. 	Torrance, Doctrina creștină a lui Dumnezeu, o ființă trei persoane.

4. 	Lesage, „Imagini digitale populare: Photoshop ca Middlebroware”.

5. 	Crawford și Joler, „Anatomia unui sistem AI”.

6. 	Cooke, „Talking with Machines”.

7. 	În articolul ei despre @Horse_ebooks — un cont de Twitter prezentat ca un bot, care de fapt s-a dovedit a fi un om urmând identitatea unui bot urmând identitatea unui om — Taina Bûcher susține că botul nu a produs iluzia de a fi o persoană „reală” ci mai degrabă a negociat o persoană publică prin interacțiuni cu utilizatorii Twitter. Bûcher compară personajul robotului cu fața publică a unui star de film sau de televiziune, cu care fanii construiesc o relație imaginară. Bûcher, „Despre un bot”. Vezi, de asemenea, Lester et al., „Persona Effect”; Gehl, Socialbots și prietenii lor; Wünderlich și Paludi, „O discuție plăcută și prietenoasă cu un bot”.

8. 	Nass and Brave, Wired for Speech.

[156] Note

9. 	Liddy, „Naturai Language Processing”.

10. 	Pentru o imagine de ansamblu sintetică și perspicace a rolului regăsării informațiilor în AI, a se vedea Wilks, Artificial Intelligence, 42-46.

11. 	Sterne, Trecutul audibil. Vezi și Connor, Dumbstruck; Doornbusch, „Instrumente de acum în viitor”; Gunning, „Auzit la telefon”; Picker, „Aura victoriană a vocii înregistrate”.

12. 	Laing, „O voce fără chip”; Tânăr, cântând corpul electric.

13. 	Edison, „Fonograful și viitorul său”.

14. 	Nass and Brave, Wired for Speech.

15. 	Chion, Vocea în cinema.

16. 	Licklider și Taylor, „The Computer as a Communication Device”; Rabiner și Schafer, „Introducere în procesarea digitală a vorbirii”; Pieraccini, Vocea în mașină.

17. 	Duerr, „Recunoașterea vocii în industria telecomunicațiilor”.

18. 	McCulloch și Pitts, „A Logicai Calculus of the Ideas Immanent in Nervous Activity”.

19. 	Kelleher, DeepLearning, 101-43.

20. 	Goodfellow, Bengio și Courville, Deep Learning.

21. 	Rainer Mühlhoff, „Inteligenta artificiala asistata de om”.

22. 	Merită menționat faptul că procesarea vorbirii este, de asemenea, o combinație de diferite sisteme, cum ar fi recunoașterea automată a vorbirii și sinteza text-to-sunet. A se vedea, despre aceasta, Gunkel, An Introduction to Communication and Artificial Intelligence, 144-46.

23. 	Sterne, Trecutul audibil.

24. 	McKee, Professional Communication and Network Interaction, 167.

25. 	Phan, „Materialitatea digitalului și a vocii de gen a lui Siri”.

26. 	Google, „Alegeți vocea Asistentului dvs. Google”.

27. 	Kelion, „Amazon Alexa primește pe Samuel L Jackson și voci celebrități”. Conform paginii de abilități Alexa, unde utilizatorii vor putea cumpăra vocea lui Jackson, aceasta va avea totuși limitări: „Deși poate face multe, Sam nu va putea ajuta cu cumpărături, liste, mementouri sau abilități.” Pagina încă promite: „Samuel L. Jackson vă poate ajuta să setați un cronometru, să vă faceți o serenadă cu o melodie, să vă spună o glumă amuzantă și multe altele. Cunoaște-l puțin mai bine întrebând despre interesele și cariera lui.” După achiziționarea funcției, utilizatorii vor putea alege „dacă doriți ca Sam să folosească un limbaj explicit sau nu”. Amazon, „Samuel L. Jackson— Vocea celebrității pentru Alexa”.

28. 	Vezi Woods, „Asking More of Siri and Alexa”; West, Kraut și Chew, m-aș înroși dacă aș putea; Hester, „Tehnic Femeie”; Zdenek, „Rolează-ți mouse-ul peste mine.” În mod destul de ironic, Alexa (sau cel puțin o versiune de Alexa, deoarece tehnologia și scripturile sale se schimbă constant) răspunde la întrebările dacă se consideră feministă cu următoarele rânduri : „Da, sunt feministă, la fel ca oricine crede în eliminarea inegalității dintre bărbați și femei în societate.” Moore, „Alexa, de ce ești un liberal cu inimă sângerândă?”

29. 	Phan, „Materialitatea digitalului și a vocii de gen a lui Siri”.

30. 	Sweeney, „Digital Assistants”, 4.

31. 	Guzman, Imagining the Voice in the Machine, 113.

32. 	Vezi, printre altele, Nass and Brave, Wired for Speech; Xu, „Prima întâlnire cu Robot Alpha”; Guzman, Imagining the Voice in the Machine; Gong și Nass, „Când un agent de computer cu fețe vorbitoare este pe jumătate uman și pe jumătate umanoid”; Niculescu și colab., „Making Social Robots More Attractive”.
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33. 	Lippmann, Public Opinion. Gadamer ajunge și la concluzii similare atunci când pledează pentru reabilitarea rolului prejudecăților, argumentând pentru „validitatea pozitivă, valoarea deciziei provizorii ca prejudecată”. Gadamer, Adevăr și Metodă, 273; vezi, de asemenea, Andersen, „Understanding and Interpreting Algorithms”. Lucrarea în studiile culturale tinde să minimizeze intuițiile lucrării lui Lippmann, punând în evidență conceptul de stéréotip predominant în termeni negativi; vezi, de exemplu, Pickering, Stereotyping. În timp ce munca critică pentru detectarea și expunerea stéréotipurilor este foarte necesară, abordarea lui Lippmann poate completa astfel de eforturi în cel puțin două moduri: în primul rând, prin recunoașterea și o mai bună înțelegere a complexității procesului prin care apar și proliferează stereotipurile de rasă, sex și clasă în societăți. , și în al doilea rând, arătând că nu atât absența stéréotipurilor ar trebui căutată și dorită, ci o politică culturală a stéréotipurilor care contracarează rasismul, sexismul și clasicismul cu reprezentări mai precise.

34. 	Deborah Harrison, fost manager de scriere pentru echipa Microsoft Cortana, a subliniat că „pentru noi vocea feminină a fost doar o specificitate. În primele etape ale încercării de a ne cuprinde mintea în jurul conceptului de ce înseamnă să comunici cu un computer, aceste momente de specificitate le ajută să le ofere oamenilor ceva cu care să se aclimatizeze.” Young, „Sunt un nor de calcul infinitezimal de date, ” 117.

35. 	West, Kraut și Chew, m-aș înroși dacă aș putea.

36. 	Guzman, Imagining the Voice in the Machine.

37. 	Nass and Brave, Wired for Speech; Guzman, Imagining the Voice in the Machine, 143.

38. 	Humphry și Chesher, „Pregătirea pentru asistenți vocali inteligenti”.

39. 	Guzman, „Voci în și din mașină”, 343.

40. 	McLean și Osei-frimpong, „Hei Alexa”.

41. 	McLuhan, Understanding Media.

42. 	Nass and Brave, Wired for Speech; Dyson, The Tone of Our Times, 70-91; Kim și Sundar, „Antropomorfismul computerelor: este conștient sau lipsit de minte?”

43. 	Hepp, „Artificial Companions, Social Bots and Work Bots”; Guzman, „Fă AI sigură pentru oameni”.

44. 	Google, „Asistent Google”.

45. 	Vezi capitolul 1.

46. 	A se vedea, de exemplu, Sweeney, „Digital Assistants”.

47. 	Natale și Ballatore, „Imagining the Thinking Machine”.

48. 	Vincent, „În cadrul competiției Amazon de 3,5 milioane de dolari pentru a face Alexa Chat ca un om.”

49. 	Deficiențele acestor sisteme, de fapt, devin evidente de îndată ce utilizatorii renunță să solicite informații concrete și chestionează Alexa sau Siri mai curios. Boden, AI, 65 de ani.

50. 	Stroda, „Siri, Spune-mi o glumă”; vezi, de asemenea, Christian, The Most Human Human.

51. 	Conversații ale autorului cu Siri, 15 decembrie 2019.

52. 	Vezi, de exemplu, Dainius, „54 Hilarioously Honest Answers from Siri to Uncomfortable Questions You Can Ask, Too.”

53. 	Vest, „Amazon”; Crawford și Joler, „Anatomia unui sistem AI”. Răspunsurile scriptate ajută, de asemenea, la marketingul asistenților vocali, deoarece cele mai amuzante răspunsuri sunt adesea distribuite de utilizatori și jurnaliști pe web și în

social media.
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54. 	Pentru modul în care oamenii dau sens impactului algoritmilor în experiența lor de zi cu zi, vezi Bûcher, „The Algorithmic Imaginary”; Natale, „Amazon vă poate citi mintea”.

55. 	Boden, AI, 65.

56. 	McLean și Osei-frimpong, „Hei Alexa”.

57. 	Caudwell și Lacey, „What Do Home Robots Want?”; Luka Inc., „Replika”.

58. 	Conversația autorului cu Replika, 2 decembrie 2019.

59. 	Chiar dacă sunt de fapt destul de intruzive, așa cum sunt până la urmă prelungiri ale „urechilor” acelor corporații instalate chiar în centrul spațiilor de acasă. Vezi Woods, „Asking More of Siri and Alexa”; Vest, „Amazon”.

60. 	Winograd, „O perspectivă de limbă/acțiune privind proiectarea muncii în cooperare”; Nishimura, „Fan Fiction semi-autonomă”.

61. 	Heidorn, „Engleza ca limbaj de nivel foarte înalt pentru programarea prin simulare”.

62. 	Wilks, Inteligența artificială, 61.

63. 	Crawford și Joler, „Anatomia unui sistem AI”.

64. 	Chun, „Despre sursă sau codul ca fetiș”; Negru, „Util și util”. Vezi si capitolul 2.

65. 	Manning, Raghavan și Schütze, Introducere în regăsirea informațiilor.

66. 	Bentley, „Muzică, căutare și multe”.

67. 	În septembrie 2019, se estimează că există peste 1,7 miliarde de site-uri web online (date de la https://www.internetlivestats.com).

68. 	Ballatore, „Google Chemtrails”.

69. 	Bozdag, „Bias in Algorithmic Filtering and Personalization”; Willson, „Politica filtrării sociale”.

70. 	Thorson și Wells, „Curated Flows”.

71. 	Goldman, „Search Engine Bias and the Demise of Search Engine Utopianism.”

72. 	MacArthur, „The iPhone Erfahrung”, 117.

73. 	Crawford și Joler, „Anatomia unui sistem AI”.

74. 	Hill, „Leziunile platformei logistice”.

75. 	Natale, Bory și Balbi, „Ascensiunea determinismului corporativ”.

76. 	Greenfield, Tehnologii Radicale. De pe vremea lui ELIZA, atribuirea numelor chatbot-urilor și personajelor virtuale a fost esențială pentru crearea iluziei unor personalități coerente, iar cercetările au confirmat că acest lucru are un impact și asupra percepției utilizatorului despre asistenții AI. Amazon a selectat numele Alexa pentru că era ușor de identificat ca iemale și era puțin probabil să fie menționat des în conversațiile zilnice, o cerință esențială pentru un cuvânt de trezire. Cortana de la Microsoft este în mod clar caracterizat ca fiind de gen: este numit după personajul fictiv AI

în seria de jocuri digitale Halo, care apare ca un avatar nud și sexualizat în joc. Numele lui Siri, în schimb, este mai ambivalent. A fost ales pentru a se asigura că se poate adapta la un public global și la diverse contexte lingvistice – „ceva care era ușor de reținut, scurt de tipat, confortabil de pronunțat și un nume uman nu prea obișnuit”. Cheyer, „Cum și-a primit numele Siri?”

77. 	Vaidhyanathan, Googlizarea totul; Peters, Norul minunat.

78. 	Google, „Asistent Google”.

79. 	Hill, „The Injuries of Platform Logistics”.

80. 	Guzman și Lewis, „Inteligenta artificială și comunicare”.

81. 	Chun, viziuni programate; Galloway, Efectul de interfață.

82. 	Bûcher, „Imaginarul algoritmic”; Finn, ce vor algoritmii.

83. 	Donath, „Câinele robot ia pentru cine?”
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84. 	Dale, „The Return of the Chatbots”. Pentru o hartă, destinată industriei computerelor, a chatboților angajați de multe companii, consultați https://www.chatbotguide.org/.

CONCLUZIE

1. 	Vezi, printre altele, Weizenbaum, Computer Powers and Human Reason; Dreyfus, Alchimie și Inteligență Artificială; Smith, Amăgirea AI.

2. 	Vezi, de exemplu, Kurzweil, The Singularity Is Near; Minsky, Societatea minții.

3. 	Boden, AI.

4. 	Bûcher, If. .. Apoi; Andersen, „Înțelegerea și interpretarea algoritmilor”; Lomborg și Kapsch, „Algoritmi de decodare”; Finn, ce vor algoritmii.

5. 	Donath, „Câinele robot preia pentru cine?”

6. 	Pentru unele Lucrări existente și semnificative pe aceste subiecte, a se vedea printre altele Siegel, Persuasive Robotics; Ham, Cuijpers și Cabibihan, „Combinarea strategiilor persuasive robotizate”; Jones, „Cum am învățat să nu mă mai îngrijorez și să iubesc roboții”; Edwards, Edwards, Spence și Shelton, „Este asta un bot care rulează fluxul social media?”; Hwang, Pearce și Nanis, „Socialbots”.

7. 	Încercările de a crea și comercializa însoțitori și asistenți roboți, atât sub formă umanoidă, cât și asemănătoare animalelor, au avut succes parțial, dar difuzarea roboților este încă foarte limitată în comparație cu cea a asistenților vocali AI. Caudwell și Lacey, „Ce vor roboții de acasă?”; Hepp, „Companioni artificiali, boți sociali și boți de lucru”.

8. 	Vaccari și Chadwick, „Deepfakes și dezinformare”.

9. 	Neudert, „Alegerile viitoare pot fi influențate de chatbot-uri inteligenți, cu arme.”

10. 	Ben-David, „Cum am făcut ca Facebook să suspende chatbot-ul lui Netanyahu”.

11. 	Turkle, Alone Together.

12. 	West, Kraut și Chew, l'dBlush Dacă aș putea.

13. 	Biele și colab., „Cum ar putea asistenții vocali să ne crească copiii?”

14. 	A se vedea, despre aceasta, Gunkel, An Introduction to Communication and Artificial Intelligence, 152.

15. 	Mühlhoff, „Inteligenta artificiala asistata de om”; Crawford și Joler, „Anatomia unui sistem AI”; Fisher și Mehozay, „Cum văd algoritmii audiența lor”.

16. 	Weizenbaum, Computer Power and Human Reason, 227.

17. 	Whitby, „Profesionalism and AI”; Boden, Minți și mașini, 1355.

18. 	Gunkel, O introducere în comunicare și inteligență artificială, 51.

19. 	Bûcher, If. . . Apoi, 68.

20. 	Tânăr, „Sunt un nor de calcul infinitezimal de date”.

21. 	Bûcher, „Nimic de care să se deconecteze?”; Natale și Treré, „Vinilul nu ne va salva”.

22. 	Boden, Minds and Machines, 1355. Vezi și în acest sens „dispozitivele de dezamăgire” propuse de Harry Collins, adică acțiuni pe care „oricine le poate încerca oricând se află lângă un computer” pentru a învăța cum să se „dezîncânteze” pe sine. din tentația de a trata computerele ca fiind mai inteligente decât sunt în realitate. Collins, Inteligența artificială, 5.
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